O Dia da Comunidade de ML é dia 9 de novembro! Junte-nos para atualização de TensorFlow, JAX, e mais Saiba mais

dirigível

  • Descrição:

BLiMP é um desafio definido para avaliar o que os modelos de linguagem (LMs) sabem sobre os principais fenômenos gramaticais do inglês. O BLiMP consiste em 67 sub-conjuntos de dados, cada um contendo 1000 pares mínimos isolando contrastes específicos na sintaxe, morfologia ou semântica. Os dados são gerados automaticamente de acordo com gramáticas elaboradas por especialistas.

Dividir Exemplos
'train' 1.000
  • Características:
FeaturesDict({
    'UID': Text(shape=(), dtype=tf.string),
    'field': Text(shape=(), dtype=tf.string),
    'lexically_identical': tf.bool,
    'linguistics_term': Text(shape=(), dtype=tf.string),
    'one_prefix_method': tf.bool,
    'pair_id': tf.int32,
    'sentence_bad': Text(shape=(), dtype=tf.string),
    'sentence_good': Text(shape=(), dtype=tf.string),
    'simple_LM_method': tf.bool,
    'two_prefix_method': tf.bool,
})
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

blimp / adjunct_island (configuração padrão)

  • A inscrição Config: Esta configuração inclui o adjunct_island paradigma.

  • Tamanho do download: 350.86 KiB

  • Dataset size: 366.47 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / anaphor_gender_agreement

  • A inscrição Config: Esta configuração inclui o anaphor_gender_agreement paradigma.

  • Tamanho do download: 426.51 KiB

  • Dataset size: 332.31 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / anaphor_number_agreement

  • A inscrição Config: Esta configuração inclui o anaphor_number_agreement paradigma.

  • Tamanho do download: 440.29 KiB

  • Dataset size: 341.07 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / animate_subject_passive

  • A inscrição Config: Esta configuração inclui o animate_subject_passive paradigma.

  • Tamanho do download: 451.46 KiB

  • Dataset size: 345.50 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / animate_subject_trans

  • A inscrição Config: Esta configuração inclui os animate_subject_trans paradigma.

  • Tamanho do download: 422.95 KiB

  • Dataset size: 329.27 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / causador

  • A inscrição Config: Esta configuração inclui o causador paradigma.

  • Tamanho do download: 309.73 KiB

  • Dataset size: 324.36 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / complex_NP_island

  • A inscrição Config: Esta configuração inclui o complex_NP_island paradigma.

  • Tamanho do download: 383.17 KiB

  • Dataset size: 398.78 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / coordinate_structure_constraint_complex_left_branch

  • A inscrição Config: Esta configuração inclui o coordinate_structure_constraint_complex_left_branch paradigma.

  • Tamanho do download: 558.30 KiB

  • Dataset size: 410.43 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / coordinate_structure_constraint_object_extraction

  • A inscrição Config: Esta configuração inclui o coordinate_structure_constraint_object_extraction paradigma.

  • Tamanho do download: 357.47 KiB

  • Dataset size: 372.10 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_1

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_1 paradigma.

  • Tamanho do download: 457.66 KiB

  • Dataset size: 356.93 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_2

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_2 paradigma.

  • Tamanho do download: 477.40 KiB

  • Dataset size: 357.01 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_irregular_1

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_irregular_1 paradigma.

  • Tamanho do download: 463.80 KiB

  • Dataset size: 365.08 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_irregular_2

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_irregular_2 paradigma.

  • Tamanho do download: 479.35 KiB

  • Dataset size: 361.76 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_with_adj_2

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_with_adj_2 paradigma.

  • Tamanho do download: 514.46 KiB

  • Dataset size: 379.92 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_with_adj_irregular_1

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_with_adj_irregular_1 paradigma.

  • Tamanho do download: 487.95 KiB

  • Dataset size: 384.67 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_with_adj_irregular_2

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_with_adj_irregular_2 paradigma.

  • Tamanho do download: 516.14 KiB

  • Dataset size: 384.54 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / determiner_noun_agreement_with_adjective_1

  • A inscrição Config: Esta configuração inclui o determiner_noun_agreement_with_adjective_1 paradigma.

  • Tamanho do download: 492.85 KiB

  • Dataset size: 385.25 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / distractor_agreement_relational_noun

  • A inscrição Config: Esta configuração inclui o distractor_agreement_relational_noun paradigma.

  • Tamanho do download: 513.33 KiB

  • Dataset size: 391.45 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / distractor_agreement_relative_clause

  • A inscrição Config: Esta configuração inclui o distractor_agreement_relative_clause paradigma.

  • Tamanho do download: 551.53 KiB

  • Dataset size: 416.14 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / drop_argument

  • A inscrição Config: Esta configuração inclui o drop_argument paradigma.

  • Tamanho do download: 297.07 KiB

  • Dataset size: 311.70 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_1

  • A inscrição Config: Esta configuração inclui o ellipsis_n_bar_1 paradigma.

  • Tamanho do download: 402.32 KiB

  • Dataset size: 417.06 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_2

  • A inscrição Config: Esta configuração inclui o ellipsis_n_bar_2 paradigma.

  • Tamanho do download: 417.53 KiB

  • Dataset size: 432.47 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / existential_there_object_raising

  • A inscrição Config: Esta configuração inclui o paradigma existential_there_object_raising.

  • Tamanho do download: 537.77 KiB

  • Dataset tamanho: 423.00 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / existential_there_quantifiers_1

  • A inscrição Config: Esta configuração inclui o existential_there_quantifiers_1 paradigma.

  • Tamanho do download: 348.95 KiB

  • Dataset size: 363.58 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / existential_there_quantifiers_2

  • A inscrição Config: Esta configuração inclui o existential_there_quantifiers_2 paradigma.

  • Tamanho do download: 350.80 KiB

  • Dataset size: 365.43 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / existential_there_subject_raising

  • A inscrição Config: Esta configuração inclui o paradigma existential_there_subject_raising.

  • Tamanho do download: 385.21 KiB

  • Dataset size: 399.84 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / expletive_it_object_raising

  • A inscrição Config: Esta configuração inclui o paradigma expletive_it_object_raising.

  • Tamanho do download: 573.88 KiB

  • Dataset size: 437.58 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / incoativo

  • A inscrição Config: Esta configuração inclui o incoativo paradigma.

  • Tamanho do download: 291.71 KiB

  • Dataset size: 306.34 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / intransitivo

  • A inscrição Config: Esta configuração inclui o intransitivo paradigma.

  • Tamanho do download: 298.33 KiB

  • Dataset size: 312.96 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / irregular_past_participle_adjectives

  • A inscrição Config: Esta configuração inclui os irregular_past_participle_adjectives paradigma.

  • Tamanho do download: 434.10 KiB

  • Dataset size: 345.74 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / irregular_past_participle_verbs

  • A inscrição Config: Esta configuração inclui os irregular_past_participle_verbs paradigma.

  • Tamanho do download: 410.27 KiB

  • Dataset size: 327.21 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / irregular_plural_subject_verb_agreement_1

  • A inscrição Config: Esta configuração inclui o irregular_plural_subject_verb_agreement_1 paradigma.

  • Tamanho do download: 449.91 KiB

  • Dataset size: 366.17 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / irregular_plural_subject_verb_agreement_2

  • A inscrição Config: Esta configuração inclui o irregular_plural_subject_verb_agreement_2 paradigma.

  • Tamanho do download: 442.75 KiB

  • Dataset size: 354.70 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / left_branch_island_echo_question

  • A inscrição Config: Esta configuração inclui o left_branch_island_echo_question paradigma.

  • Tamanho do download: 471.31 KiB

  • Dataset size: 348.84 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / left_branch_island_simple_question

  • A inscrição Config: Esta configuração inclui o left_branch_island_simple_question paradigma.

  • Tamanho do download: 335.40 KiB

  • Dataset size: 351.01 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / matrix_question_npi_licensor_present

  • A inscrição Config: Esta configuração inclui o matrix_question_npi_licensor_present paradigma.

  • Tamanho do download: 447.08 KiB

  • Dataset size: 354.14 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / npi_present_1

  • A inscrição Config: Esta configuração inclui o npi_present_1 paradigma.

  • Tamanho do download: 427.75 KiB

  • Dataset size: 339.68 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / npi_present_2

  • A inscrição Config: Esta configuração inclui o npi_present_2 paradigma.

  • Tamanho do download: 412.24 KiB

  • Dataset size: 329.11 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / only_npi_licensor_present

  • Configuração Descrição: Esta configuração inclui o only_npi_licensor_present paradigma.

  • Tamanho do download: 448.41 KiB

  • Dataset size: 349.50 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / only_npi_scope

  • A inscrição Config: Esta configuração inclui o only_npi_scope paradigma.

  • Tamanho do download: 570.04 KiB

  • Dataset size: 408.52 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / passivo_1

  • A inscrição Config: Esta configuração inclui o passive_1 paradigma.

  • Tamanho do download: 332.30 KiB

  • Dataset size: 346.93 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / passivo_2

  • A inscrição Config: Esta configuração inclui o passive_2 paradigma.

  • Tamanho do download: 301.12 KiB

  • Dataset size: 315.75 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / princípio_A_c_command

  • A inscrição Config: Esta configuração inclui o principle_A_c_command paradigma.

  • Tamanho do download: 515.32 KiB

  • Dataset size: 388.54 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / princípio_A_case_1

  • A inscrição Config: Esta configuração inclui o paradigma principle_A_case_1.

  • Tamanho do download: 466.05 KiB

  • Dataset size: 370.87 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / princípio_A_case_2

  • A inscrição Config: Esta configuração inclui o paradigma principle_A_case_2.

  • Tamanho do download: 481.42 KiB

  • Dataset size: 370.88 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / principio_A_dominio_1

  • A inscrição Config: Esta configuração inclui o paradigma principle_A_domain_1.

  • Tamanho do download: 488.15 KiB

  • Dataset size: 371.62 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / principio_A_dominio_2

  • A inscrição Config: Esta configuração inclui o paradigma principle_A_domain_2.

  • Tamanho do download: 481.63 KiB

  • Dataset size: 365.92 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / princípio_A_domínio_3

  • A inscrição Config: Esta configuração inclui o paradigma principle_A_domain_3.

  • Tamanho do download: 501.84 KiB

  • Dataset size: 359.74 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / princípio_A_reconstrução

  • A inscrição Config: Esta configuração inclui o principle_A_reconstruction paradigma.

  • Tamanho do download: 337.40 KiB

  • Dataset tamanho: 353.00 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / regular_plural_subject_verb_agreement_1

  • A inscrição Config: Esta configuração inclui o regular_plural_subject_verb_agreement_1 paradigma.

  • Tamanho do download: 441.26 KiB

  • Dataset size: 359.56 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / regular_plural_subject_verb_agreement_2

  • A inscrição Config: Esta configuração inclui o regular_plural_subject_verb_agreement_2 paradigma.

  • Tamanho do download: 445.78 KiB

  • Dataset size: 354.47 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / sentential_negation_npi_licensor_present

  • A inscrição Config: Esta configuração inclui o sentential_negation_npi_licensor_present paradigma.

  • Tamanho do download: 479.49 KiB

  • Dataset size: 372.30 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / sentential_negation_npi_scope

  • A inscrição Config: Esta configuração inclui o sentential_negation_npi_scope paradigma.

  • Tamanho do download: 600.52 KiB

  • Dataset size: 431.18 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / sentential_subject_island

  • A inscrição Config: Esta configuração inclui o sentential_subject_island paradigma.

  • Tamanho do download: 357.25 KiB

  • Dataset size: 372.86 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / superlative_quantifiers_1

  • A inscrição Config: Esta configuração inclui o superlative_quantifiers_1 paradigma.

  • Tamanho do download: 372.25 KiB

  • Dataset size: 360.02 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / superlative_quantifiers_2

  • A inscrição Config: Esta configuração inclui o superlative_quantifiers_2 paradigma.

  • Tamanho do download: 504.02 KiB

  • Dataset size: 360.07 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / tough_vs_raising_1

  • A inscrição Config: Esta configuração inclui o tough_vs_raising_1 paradigma.

  • Tamanho do download: 334.99 KiB

  • Dataset size: 349.62 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / tough_vs_raising_2

  • A inscrição Config: Esta configuração inclui o tough_vs_raising_2 paradigma.

  • Tamanho do download: 355.54 KiB

  • Dataset size: 370.17 KiB

  • Exemplos ( tfds.as_dataframe ):

dirigível / transitivo

  • A inscrição Config: Esta configuração inclui o transitivo paradigma.

  • Tamanho do download: 449.50 KiB

  • Dataset size: 334.45 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_island

  • A inscrição Config: Esta configuração inclui o wh_island paradigma.

  • Tamanho do download: 438.12 KiB

  • Dataset size: 343.47 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_questions_object_gap

  • A inscrição Config: Esta configuração inclui o wh_questions_object_gap paradigma.

  • Tamanho do download: 378.35 KiB

  • Dataset size: 392.99 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_questions_subject_gap

  • A inscrição Config: Esta configuração inclui o wh_questions_subject_gap paradigma.

  • Tamanho do download: 380.84 KiB

  • Dataset size: 395.47 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_questions_subject_gap_long_distance

  • A inscrição Config: Esta configuração inclui o wh_questions_subject_gap_long_distance paradigma.

  • Tamanho do download: 451.82 KiB

  • Dataset size: 466.53 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_vs_that_no_gap

  • A inscrição Config: Esta configuração inclui o wh_vs_that_no_gap paradigma.

  • Tamanho do download: 374.28 KiB

  • Dataset size: 388.91 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_vs_that_no_gap_long_distance

  • A inscrição Config: Esta configuração inclui o wh_vs_that_no_gap_long_distance paradigma.

  • Tamanho do download: 431.08 KiB

  • Dataset size: 445.74 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_vs_that_with_gap

  • A inscrição Config: Esta configuração inclui o wh_vs_that_with_gap paradigma.

  • Tamanho do download: 359.16 KiB

  • Dataset size: 373.79 KiB

  • Exemplos ( tfds.as_dataframe ):

blimp / wh_vs_that_with_gap_long_distance

  • A inscrição Config: Esta configuração inclui o wh_vs_that_with_gap_long_distance paradigma.

  • Tamanho do download: 416.00 KiB

  • Dataset size: 430.63 KiB

  • Exemplos ( tfds.as_dataframe ):