dirigeable

  • Description:

BLiMP est un défi pour évaluer ce que les modèles linguistiques (LM) connaissent des principaux phénomènes grammaticaux en anglais. BLiMP se compose de 67 sous-ensembles de données, chacun contenant 1000 paires minimales isolant des contrastes spécifiques dans la syntaxe, la morphologie ou la sémantique. Les données sont générées automatiquement selon des grammaires élaborées par des experts.

Diviser Exemples
'train' 1 000
  • Caractéristiques:
FeaturesDict({
    'UID': Text(shape=(), dtype=tf.string),
    'field': Text(shape=(), dtype=tf.string),
    'lexically_identical': tf.bool,
    'linguistics_term': Text(shape=(), dtype=tf.string),
    'one_prefix_method': tf.bool,
    'pair_id': tf.int32,
    'sentence_bad': Text(shape=(), dtype=tf.string),
    'sentence_good': Text(shape=(), dtype=tf.string),
    'simple_LM_method': tf.bool,
    'two_prefix_method': tf.bool,
})
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

dirigeable/adjoint_island (configuration par défaut)

  • Description Config: Cette configuration comprend le paradigme adjunct_island.

  • Taille du téléchargement: 350.86 KiB

  • Dataset Taille: 366.47 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/anaphor_gender_agreement

  • Description Config: Cette configuration comprend le paradigme anaphor_gender_agreement.

  • Taille du téléchargement: 426.51 KiB

  • Dataset Taille: 332.31 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/anaphor_number_agreement

  • Description Config: Cette configuration comprend le paradigme anaphor_number_agreement.

  • Taille du téléchargement: 440.29 KiB

  • Dataset Taille: 341.07 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/animer_sujet_passif

  • Description Config: Cette configuration comprend le paradigme animate_subject_passive.

  • Taille du téléchargement: 451.46 KiB

  • Dataset Taille: 345.50 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/animer_sujet_trans

  • Description Config: Cette configuration comprend le paradigme animate_subject_trans.

  • Taille du téléchargement: 422.95 KiB

  • Dataset Taille: 329.27 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/causatif

  • Description Config: Cette configuration comprend le paradigme causal.

  • Taille du téléchargement: 309.73 KiB

  • Dataset Taille: 324.36 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/complexe_NP_island

  • Description Config: Cette configuration comprend le paradigme complex_NP_island.

  • Taille du téléchargement: 383.17 KiB

  • Dataset Taille: 398.78 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/coordinate_structure_constraint_complex_left_branch

  • Description Config: Cette configuration comprend le paradigme coordinate_structure_constraint_complex_left_branch.

  • Taille du téléchargement: 558.30 KiB

  • Dataset Taille: 410.43 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/coordinate_structure_constraint_object_extraction

  • Description Config: Cette configuration comprend le paradigme coordinate_structure_constraint_object_extraction.

  • Taille du téléchargement: 357.47 KiB

  • Dataset Taille: 372.10 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_1

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_1.

  • Taille du téléchargement: 457.66 KiB

  • Dataset Taille: 356.93 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_2

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_2.

  • Taille du téléchargement: 477.40 KiB

  • Dataset Taille: 357.01 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_irregular_1

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_irregular_1.

  • Taille du téléchargement: 463.80 KiB

  • Dataset Taille: 365.08 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_irregular_2

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_irregular_2.

  • Taille du téléchargement: 479.35 KiB

  • Dataset Taille: 361.76 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_with_adj_2

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_with_adj_2.

  • Taille du téléchargement: 514.46 KiB

  • Dataset Taille: 379.92 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_with_adj_irregular_1

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_with_adj_irregular_1.

  • Taille du téléchargement: 487.95 KiB

  • Dataset Taille: 384.67 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_with_adj_irregular_2

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_with_adj_irregular_2.

  • Taille du téléchargement: 516.14 KiB

  • Dataset Taille: 384.54 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/determiner_noun_agreement_with_adjective_1

  • Description Config: Cette configuration comprend le paradigme determiner_noun_agreement_with_adjective_1.

  • Taille du téléchargement: 492.85 KiB

  • Dataset Taille: 385.25 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/distracteur_agreement_relational_noun

  • Description Config: Cette configuration comprend le paradigme distractor_agreement_relational_noun.

  • Taille du téléchargement: 513.33 KiB

  • Dataset Taille: 391.45 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/distracteur_agreement_relative_clause

  • Description Config: Cette configuration comprend le paradigme distractor_agreement_relative_clause.

  • Taille du téléchargement: 551.53 KiB

  • Dataset Taille: 416.14 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/drop_argument

  • Description Config: Cette configuration comprend le paradigme drop_argument.

  • Taille du téléchargement: 297.07 KiB

  • Dataset Taille: 311.70 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/ellipsis_n_bar_1

  • Description Config: Cette configuration comprend le paradigme ellipsis_n_bar_1.

  • Taille du téléchargement: 402.32 KiB

  • Dataset Taille: 417.06 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/ellipsis_n_bar_2

  • Description Config: Cette configuration comprend le paradigme ellipsis_n_bar_2.

  • Taille du téléchargement: 417.53 KiB

  • Dataset Taille: 432.47 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/existential_there_object_raising

  • Description Config: Cette configuration comprend le paradigme existential_there_object_raising.

  • Taille du téléchargement: 537.77 KiB

  • Dataset Taille: 423.00 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/existential_there_quantifiers_1

  • Description Config: Cette configuration comprend le paradigme existential_there_quantifiers_1.

  • Taille du téléchargement: 348.95 KiB

  • Dataset Taille: 363.58 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/existential_there_quantifiers_2

  • Description Config: Cette configuration comprend le paradigme existential_there_quantifiers_2.

  • Taille du téléchargement: 350.80 KiB

  • Dataset Taille: 365.43 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/existential_there_subject_raising

  • Description Config: Cette configuration comprend le paradigme existential_there_subject_raising.

  • Taille du téléchargement: 385.21 KiB

  • Dataset Taille: 399.84 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/expletive_it_object_raising

  • Description Config: Cette configuration comprend le paradigme expletive_it_object_raising.

  • Taille du téléchargement: 573.88 KiB

  • Dataset Taille: 437.58 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/inchoative

  • Description Config: Cette configuration comprend le paradigme inchoative.

  • Taille du téléchargement: 291.71 KiB

  • Dataset Taille: 306.34 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/intransitif

  • Description Config: Cette configuration comprend le paradigme intransitif.

  • Taille du téléchargement: 298.33 KiB

  • Dataset Taille: 312.96 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/irregular_past_participe_adjectives

  • Description Config: Cette configuration comprend le paradigme irregular_past_participle_adjectives.

  • Taille du téléchargement: 434.10 KiB

  • Dataset Taille: 345.74 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/irregular_past_participe_verbs

  • Description Config: Cette configuration comprend le paradigme irregular_past_participle_verbs.

  • Taille du téléchargement: 410.27 KiB

  • Dataset Taille: 327.21 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/irregular_plural_subject_verb_agreement_1

  • Description Config: Cette configuration comprend le paradigme irregular_plural_subject_verb_agreement_1.

  • Taille du téléchargement: 449.91 KiB

  • Dataset Taille: 366.17 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/irregular_plural_subject_verb_agreement_2

  • Description Config: Cette configuration comprend le paradigme irregular_plural_subject_verb_agreement_2.

  • Taille du téléchargement: 442.75 KiB

  • Dataset Taille: 354.70 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/left_branch_island_echo_question

  • Description Config: Cette configuration comprend le paradigme left_branch_island_echo_question.

  • Taille du téléchargement: 471.31 KiB

  • Dataset Taille: 348.84 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/left_branch_island_simple_question

  • Description Config: Cette configuration comprend le paradigme left_branch_island_simple_question.

  • Taille du téléchargement: 335.40 KiB

  • Dataset Taille: 351.01 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/matrix_question_npi_liccensor_present

  • Description Config: Cette configuration comprend le paradigme matrix_question_npi_licensor_present.

  • Taille du téléchargement: 447.08 KiB

  • Dataset Taille: 354.14 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/npi_present_1

  • Description Config: Cette configuration comprend le paradigme npi_present_1.

  • Taille du téléchargement: 427.75 KiB

  • Dataset Taille: 339.68 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/npi_present_2

  • Description Config: Cette configuration comprend le paradigme npi_present_2.

  • Taille du téléchargement: 412.24 KiB

  • Dataset Taille: 329.11 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/only_npi_liccensor_present

  • Description Config: Cette configuration comprend le paradigme only_npi_licensor_present.

  • Taille du téléchargement: 448.41 KiB

  • Dataset Taille: 349.50 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/only_npi_scope

  • Description Config: Cette configuration comprend le paradigme only_npi_scope.

  • Taille du téléchargement: 570.04 KiB

  • Dataset Taille: 408.52 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/passif_1

  • Description Config: Cette configuration comprend le paradigme passive_1.

  • Taille du téléchargement: 332.30 KiB

  • Dataset Taille: 346.93 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/passif_2

  • Description Config: Cette configuration comprend le paradigme passive_2.

  • Taille du téléchargement: 301.12 KiB

  • Dataset Taille: 315.75 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_c_command

  • Description Config: Cette configuration comprend le paradigme principle_A_c_command.

  • Taille du téléchargement: 515.32 KiB

  • Dataset Taille: 388.54 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_case_1

  • Description Config: Cette configuration comprend le paradigme principle_A_case_1.

  • Taille du téléchargement: 466.05 KiB

  • Dataset Taille: 370.87 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_case_2

  • Description Config: Cette configuration comprend le paradigme principle_A_case_2.

  • Taille du téléchargement: 481.42 KiB

  • Dataset Taille: 370.88 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_domain_1

  • Description Config: Cette configuration comprend le paradigme principle_A_domain_1.

  • Taille du téléchargement: 488.15 KiB

  • Dataset Taille: 371.62 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_domain_2

  • Description Config: Cette configuration comprend le paradigme principle_A_domain_2.

  • Taille du téléchargement: 481.63 KiB

  • Dataset Taille: 365.92 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_domain_3

  • Description Config: Cette configuration comprend le paradigme principle_A_domain_3.

  • Taille du téléchargement: 501.84 KiB

  • Dataset Taille: 359.74 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/principe_A_reconstruction

  • Description Config: Cette configuration comprend le paradigme principle_A_reconstruction.

  • Taille du téléchargement: 337.40 KiB

  • Dataset Taille: 353.00 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/regular_plural_subject_verb_agreement_1

  • Description Config: Cette configuration comprend le paradigme regular_plural_subject_verb_agreement_1.

  • Taille du téléchargement: 441.26 KiB

  • Dataset Taille: 359.56 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/regular_plural_subject_verb_agreement_2

  • Description Config: Cette configuration comprend le paradigme regular_plural_subject_verb_agreement_2.

  • Taille du téléchargement: 445.78 KiB

  • Dataset Taille: 354.47 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/sentential_negation_npi_liccensor_present

  • Description Config: Cette configuration comprend le paradigme sentential_negation_npi_licensor_present.

  • Taille du téléchargement: 479.49 KiB

  • Dataset Taille: 372.30 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/sentential_negation_npi_scope

  • Description Config: Cette configuration comprend le paradigme sentential_negation_npi_scope.

  • Taille du téléchargement: 600.52 KiB

  • Dataset Taille: 431.18 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/sentential_subject_island

  • Description Config: Cette configuration comprend le paradigme sentential_subject_island.

  • Taille du téléchargement: 357.25 KiB

  • Dataset Taille: 372.86 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/quantificateurs_superlatifs_1

  • Description Config: Cette configuration comprend le paradigme superlative_quantifiers_1.

  • Taille du téléchargement: 372.25 KiB

  • Dataset Taille: 360.02 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/quantificateurs_superlatifs_2

  • Description Config: Cette configuration comprend le paradigme superlative_quantifiers_2.

  • Taille du téléchargement: 504.02 KiB

  • Dataset Taille: 360.07 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/dur_vs_raising_1

  • Description Config: Cette configuration comprend le paradigme tough_vs_raising_1.

  • Taille du téléchargement: 334.99 KiB

  • Dataset Taille: 349.62 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/dur_vs_raising_2

  • Description Config: Cette configuration comprend le paradigme tough_vs_raising_2.

  • Taille du téléchargement: 355.54 KiB

  • Dataset Taille: 370.17 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/transitif

  • Description Config: Cette configuration comprend le transitive paradigme.

  • Taille du téléchargement: 449.50 KiB

  • Dataset Taille: 334.45 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_island

  • Description Config: Cette configuration comprend le paradigme wh_island.

  • Taille du téléchargement: 438.12 KiB

  • Dataset Taille: 343.47 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_questions_object_gap

  • Description Config: Cette configuration comprend le paradigme wh_questions_object_gap.

  • Taille du téléchargement: 378.35 KiB

  • Dataset Taille: 392.99 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_questions_subject_gap

  • Description Config: Cette configuration comprend le paradigme wh_questions_subject_gap.

  • Taille du téléchargement: 380.84 KiB

  • Dataset Taille: 395.47 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_questions_subject_gap_long_distance

  • Description Config: Cette configuration comprend le paradigme wh_questions_subject_gap_long_distance.

  • Taille du téléchargement: 451.82 KiB

  • Dataset Taille: 466.53 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_vs_that_no_gap

  • Description Config: Cette configuration comprend le paradigme wh_vs_that_no_gap.

  • Taille du téléchargement: 374.28 KiB

  • Dataset Taille: 388.91 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_vs_that_no_gap_long_distance

  • Description Config: Cette configuration comprend le paradigme wh_vs_that_no_gap_long_distance.

  • Taille du téléchargement: 431.08 KiB

  • Dataset Taille: 445.74 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_vs_that_with_gap

  • Description Config: Cette configuration comprend le paradigme wh_vs_that_with_gap.

  • Taille du téléchargement: 359.16 KiB

  • Dataset Taille: 373.79 KiB

  • Exemples ( tfds.as_dataframe ):

dirigeable/wh_vs_that_with_gap_long_distance

  • Description Config: Cette configuration comprend le paradigme wh_vs_that_with_gap_long_distance.

  • Taille du téléchargement: 416.00 KiB

  • Dataset Taille: 430.63 KiB

  • Exemples ( tfds.as_dataframe ):