¡El Día de la Comunidad de ML es el 9 de noviembre! Únase a nosotros para recibir actualizaciones de TensorFlow, JAX, y más Más información

dirigible

  • Descripción:

BLiMP es un conjunto de desafíos para evaluar lo que los modelos de lenguaje (LM) saben sobre los principales fenómenos gramaticales en inglés. BLiMP consta de 67 subconjuntos de datos, cada uno de los cuales contiene 1000 pares mínimos que aíslan contrastes específicos en sintaxis, morfología o semántica. Los datos se generan automáticamente de acuerdo con gramáticas elaboradas por expertos.

Separar Ejemplos de
'train' 1.000
  • características:
FeaturesDict({
    'UID': Text(shape=(), dtype=tf.string),
    'field': Text(shape=(), dtype=tf.string),
    'lexically_identical': tf.bool,
    'linguistics_term': Text(shape=(), dtype=tf.string),
    'one_prefix_method': tf.bool,
    'pair_id': tf.int32,
    'sentence_bad': Text(shape=(), dtype=tf.string),
    'sentence_good': Text(shape=(), dtype=tf.string),
    'simple_LM_method': tf.bool,
    'two_prefix_method': tf.bool,
})
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

blimp / adjunct_island (configuración predeterminada)

  • Descripción Config: Esta configuración incluye el adjunct_island paradigma.

  • Tamaño del paquete: 350.86 KiB

  • Conjunto de datos de tamaño: 366.47 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / anaphor_gender_agreement

  • Descripción Config: Esta configuración incluye el anaphor_gender_agreement paradigma.

  • Tamaño del paquete: 426.51 KiB

  • Conjunto de datos de tamaño: 332.31 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / anaphor_number_agreement

  • Descripción Config: Esta configuración incluye el anaphor_number_agreement paradigma.

  • Tamaño del paquete: 440.29 KiB

  • Conjunto de datos de tamaño: 341.07 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / animate_subject_passive

  • Descripción Config: Esta configuración incluye el animate_subject_passive paradigma.

  • Tamaño del paquete: 451.46 KiB

  • Conjunto de datos de tamaño: 345.50 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / animate_subject_trans

  • Descripción Config: Esta configuración incluye las animate_subject_trans paradigma.

  • Tamaño del paquete: 422.95 KiB

  • Conjunto de datos de tamaño: 329.27 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / causativo

  • Descripción Config: Esta configuración incluye el causativo paradigma.

  • Tamaño del paquete: 309.73 KiB

  • Conjunto de datos de tamaño: 324.36 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / complex_NP_island

  • Descripción Config: Esta configuración incluye el complex_NP_island paradigma.

  • Tamaño del paquete: 383.17 KiB

  • Conjunto de datos de tamaño: 398.78 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / coordenada_estructura_constraint_complex_left_branch

  • Descripción Config: Esta configuración incluye el coordinate_structure_constraint_complex_left_branch paradigma.

  • Tamaño del paquete: 558.30 KiB

  • Conjunto de datos de tamaño: 410.43 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / coordenada_estructura_constraint_object_extraction

  • Descripción Config: Esta configuración incluye el coordinate_structure_constraint_object_extraction paradigma.

  • Tamaño del paquete: 357.47 KiB

  • Conjunto de datos de tamaño: 372.10 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_1

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_1 paradigma.

  • Tamaño del paquete: 457.66 KiB

  • Conjunto de datos de tamaño: 356.93 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_2

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_2 paradigma.

  • Tamaño del paquete: 477.40 KiB

  • Conjunto de datos de tamaño: 357.01 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_irregular_1

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_irregular_1 paradigma.

  • Tamaño del paquete: 463.80 KiB

  • Conjunto de datos de tamaño: 365.08 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_irregular_2

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_irregular_2 paradigma.

  • Tamaño del paquete: 479.35 KiB

  • Conjunto de datos de tamaño: 361.76 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_with_adj_2

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_with_adj_2 paradigma.

  • Tamaño del paquete: 514.46 KiB

  • Conjunto de datos de tamaño: 379.92 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_with_adj_irregular_1

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_with_adj_irregular_1 paradigma.

  • Tamaño del paquete: 487.95 KiB

  • Conjunto de datos de tamaño: 384.67 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_with_adj_irregular_2

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_with_adj_irregular_2 paradigma.

  • Tamaño del paquete: 516.14 KiB

  • Conjunto de datos de tamaño: 384.54 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / determiner_noun_agreement_with_adjective_1

  • Descripción Config: Esta configuración incluye el determiner_noun_agreement_with_adjective_1 paradigma.

  • Tamaño del paquete: 492.85 KiB

  • Conjunto de datos de tamaño: 385.25 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / distractor_agreement_relational_noun

  • Descripción Config: Esta configuración incluye el distractor_agreement_relational_noun paradigma.

  • Tamaño del paquete: 513.33 KiB

  • Conjunto de datos de tamaño: 391.45 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / distractor_agreement_relative_clause

  • Descripción Config: Esta configuración incluye el distractor_agreement_relative_clause paradigma.

  • Tamaño del paquete: 551.53 KiB

  • Conjunto de datos de tamaño: 416.14 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / drop_argument

  • Descripción Config: Esta configuración incluye el drop_argument paradigma.

  • Tamaño del paquete: 297.07 KiB

  • Conjunto de datos de tamaño: 311.70 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / ellipsis_n_bar_1

  • Descripción Config: Esta configuración incluye el ellipsis_n_bar_1 paradigma.

  • Tamaño del paquete: 402.32 KiB

  • Conjunto de datos de tamaño: 417.06 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / ellipsis_n_bar_2

  • Descripción Config: Esta configuración incluye el ellipsis_n_bar_2 paradigma.

  • Tamaño del paquete: 417.53 KiB

  • Conjunto de datos de tamaño: 432.47 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / existencial_aquí_objeto_raising

  • Descripción Config: Esta configuración incluye el paradigma existential_there_object_raising.

  • Tamaño del paquete: 537.77 KiB

  • Conjunto de datos de tamaño: 423.00 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / existential_there_quantifiers_1

  • Descripción Config: Esta configuración incluye el existential_there_quantifiers_1 paradigma.

  • Tamaño del paquete: 348.95 KiB

  • Conjunto de datos de tamaño: 363.58 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / existential_there_quantifiers_2

  • Descripción Config: Esta configuración incluye el existential_there_quantifiers_2 paradigma.

  • Tamaño del paquete: 350.80 KiB

  • Conjunto de datos de tamaño: 365.43 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / existencial_aquí_subject_raising

  • Descripción Config: Esta configuración incluye el paradigma existential_there_subject_raising.

  • Tamaño del paquete: 385.21 KiB

  • Conjunto de datos de tamaño: 399.84 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / expletive_it_object_raising

  • Descripción Config: Esta configuración incluye el paradigma expletive_it_object_raising.

  • Tamaño del paquete: 573.88 KiB

  • Conjunto de datos de tamaño: 437.58 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / incoativo

  • Descripción Config: Esta configuración incluye el incoativas paradigma.

  • Tamaño del paquete: 291.71 KiB

  • Conjunto de datos de tamaño: 306.34 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / intransitivo

  • Descripción Config: Esta configuración incluye la intransitivo paradigma.

  • Tamaño del paquete: 298.33 KiB

  • Conjunto de datos de tamaño: 312.96 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / irregular_past_participle_adjectives

  • Descripción Config: Esta configuración incluye las irregular_past_participle_adjectives paradigma.

  • Tamaño del paquete: 434.10 KiB

  • Conjunto de datos de tamaño: 345.74 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / irregular_past_participle_verbs

  • Descripción Config: Esta configuración incluye las irregular_past_participle_verbs paradigma.

  • Tamaño del paquete: 410.27 KiB

  • Conjunto de datos de tamaño: 327.21 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / irregular_plural_subject_verb_agreement_1

  • Descripción Config: Esta configuración incluye el irregular_plural_subject_verb_agreement_1 paradigma.

  • Tamaño del paquete: 449.91 KiB

  • Conjunto de datos de tamaño: 366.17 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / irregular_plural_subject_verb_agreement_2

  • Descripción Config: Esta configuración incluye el irregular_plural_subject_verb_agreement_2 paradigma.

  • Tamaño del paquete: 442.75 KiB

  • Conjunto de datos de tamaño: 354.70 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / izquierda_branch_island_echo_question

  • Descripción Config: Esta configuración incluye el left_branch_island_echo_question paradigma.

  • Tamaño del paquete: 471.31 KiB

  • Conjunto de datos de tamaño: 348.84 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / izquierda_branch_island_simple_question

  • Descripción Config: Esta configuración incluye el left_branch_island_simple_question paradigma.

  • Tamaño del paquete: 335.40 KiB

  • Conjunto de datos de tamaño: 351.01 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / matrix_question_npi_licensor_present

  • Descripción Config: Esta configuración incluye el matrix_question_npi_licensor_present paradigma.

  • Tamaño del paquete: 447.08 KiB

  • Conjunto de datos de tamaño: 354.14 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / npi_present_1

  • Descripción Config: Esta configuración incluye el npi_present_1 paradigma.

  • Tamaño del paquete: 427.75 KiB

  • Conjunto de datos de tamaño: 339.68 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / npi_present_2

  • Descripción Config: Esta configuración incluye el npi_present_2 paradigma.

  • Tamaño del paquete: 412.24 KiB

  • Conjunto de datos de tamaño: 329.11 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / only_npi_licensor_present

  • Descripción Config: Esta configuración incluye el only_npi_licensor_present paradigma.

  • Tamaño del paquete: 448.41 KiB

  • Conjunto de datos de tamaño: 349.50 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / only_npi_scope

  • Descripción Config: Esta configuración incluye el only_npi_scope paradigma.

  • Tamaño del paquete: 570.04 KiB

  • Conjunto de datos de tamaño: 408.52 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / pasivo_1

  • Descripción Config: Esta configuración incluye el passive_1 paradigma.

  • Tamaño del paquete: 332.30 KiB

  • Conjunto de datos de tamaño: 346.93 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / pasivo_2

  • Descripción Config: Esta configuración incluye el passive_2 paradigma.

  • Tamaño del paquete: 301.12 KiB

  • Conjunto de datos de tamaño: 315.75 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_c_comando

  • Descripción Config: Esta configuración incluye el principle_A_c_command paradigma.

  • Tamaño del paquete: 515.32 KiB

  • Conjunto de datos de tamaño: 388.54 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_case_1

  • Descripción Config: Esta configuración incluye el paradigma principle_A_case_1.

  • Tamaño del paquete: 466.05 KiB

  • Conjunto de datos de tamaño: 370.87 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_caso_2

  • Descripción Config: Esta configuración incluye el paradigma principle_A_case_2.

  • Tamaño del paquete: 481.42 KiB

  • Conjunto de datos de tamaño: 370.88 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_dominio_1

  • Descripción Config: Esta configuración incluye el paradigma principle_A_domain_1.

  • Tamaño del paquete: 488.15 KiB

  • Conjunto de datos de tamaño: 371.62 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_dominio_2

  • Descripción Config: Esta configuración incluye el paradigma principle_A_domain_2.

  • Tamaño del paquete: 481.63 KiB

  • Conjunto de datos de tamaño: 365.92 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_dominio_3

  • Descripción Config: Esta configuración incluye el paradigma principle_A_domain_3.

  • Tamaño del paquete: 501.84 KiB

  • Conjunto de datos de tamaño: 359.74 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / principio_A_reconstrucción

  • Descripción Config: Esta configuración incluye el principle_A_reconstruction paradigma.

  • Tamaño del paquete: 337.40 KiB

  • Conjunto de datos de tamaño: 353.00 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / regular_plural_subject_verb_agreement_1

  • Descripción Config: Esta configuración incluye el regular_plural_subject_verb_agreement_1 paradigma.

  • Tamaño del paquete: 441.26 KiB

  • Conjunto de datos de tamaño: 359.56 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / regular_plural_subject_verb_agreement_2

  • Descripción Config: Esta configuración incluye el regular_plural_subject_verb_agreement_2 paradigma.

  • Tamaño del paquete: 445.78 KiB

  • Conjunto de datos de tamaño: 354.47 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / sentential_negation_npi_licensor_present

  • Descripción Config: Esta configuración incluye el sentential_negation_npi_licensor_present paradigma.

  • Tamaño del paquete: 479.49 KiB

  • Conjunto de datos de tamaño: 372.30 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / sentential_negation_npi_scope

  • Descripción Config: Esta configuración incluye el sentential_negation_npi_scope paradigma.

  • Tamaño del paquete: 600.52 KiB

  • Conjunto de datos de tamaño: 431.18 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / sentential_subject_island

  • Descripción Config: Esta configuración incluye el sentential_subject_island paradigma.

  • Tamaño del paquete: 357.25 KiB

  • Conjunto de datos de tamaño: 372.86 KiB

  • Ejemplos ( tfds.as_dataframe ):

blimp / superlative_quantifiers_1

  • Descripción Config: Esta configuración incluye el superlative_quantifiers_1 paradigma.

  • Tamaño del paquete: 372.25 KiB

  • Conjunto de datos de tamaño: 360.02 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / cuantificadores_uperlativos_2

  • Descripción Config: Esta configuración incluye el superlative_quantifiers_2 paradigma.

  • Tamaño del paquete: 504.02 KiB

  • Conjunto de datos de tamaño: 360.07 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / hard_vs_raising_1

  • Descripción Config: Esta configuración incluye el tough_vs_raising_1 paradigma.

  • Tamaño del paquete: 334.99 KiB

  • Conjunto de datos de tamaño: 349.62 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / hard_vs_raising_2

  • Descripción Config: Esta configuración incluye el tough_vs_raising_2 paradigma.

  • Tamaño del paquete: 355.54 KiB

  • Conjunto de datos de tamaño: 370.17 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / transitivo

  • Descripción Config: Esta configuración incluye el transitivo paradigma.

  • Tamaño del paquete: 449.50 KiB

  • Conjunto de datos de tamaño: 334.45 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_island

  • Descripción Config: Esta configuración incluye el wh_island paradigma.

  • Tamaño del paquete: 438.12 KiB

  • Conjunto de datos de tamaño: 343.47 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_questions_object_gap

  • Descripción Config: Esta configuración incluye el wh_questions_object_gap paradigma.

  • Tamaño del paquete: 378.35 KiB

  • Conjunto de datos de tamaño: 392.99 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_questions_subject_gap

  • Descripción Config: Esta configuración incluye el wh_questions_subject_gap paradigma.

  • Tamaño del paquete: 380.84 KiB

  • Conjunto de datos de tamaño: 395.47 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_questions_subject_gap_long_distance

  • Descripción Config: Esta configuración incluye el wh_questions_subject_gap_long_distance paradigma.

  • Tamaño del paquete: 451.82 KiB

  • Conjunto de datos de tamaño: 466.53 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_vs_that_no_gap

  • Descripción Config: Esta configuración incluye el wh_vs_that_no_gap paradigma.

  • Tamaño del paquete: 374.28 KiB

  • Conjunto de datos de tamaño: 388.91 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_vs_that_no_gap_long_distance

  • Descripción Config: Esta configuración incluye el wh_vs_that_no_gap_long_distance paradigma.

  • Tamaño del paquete: 431.08 KiB

  • Conjunto de datos de tamaño: 445.74 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_vs_that_with_gap

  • Descripción Config: Esta configuración incluye el wh_vs_that_with_gap paradigma.

  • Tamaño del paquete: 359.16 KiB

  • Conjunto de datos de tamaño: 373.79 KiB

  • Ejemplos ( tfds.as_dataframe ):

dirigible / wh_vs_that_with_gap_long_distance

  • Descripción Config: Esta configuración incluye el wh_vs_that_with_gap_long_distance paradigma.

  • Tamaño del paquete: 416.00 KiB

  • Conjunto de datos de tamaño: 430.63 KiB

  • Ejemplos ( tfds.as_dataframe ):