لدي سؤال؟ تواصل مع المجتمع في منتدى زيارة منتدى TensorFlow

شخص ساذج

  • الوصف :

BLiMP عبارة عن تحدٍ لتقييم ما تعرفه نماذج اللغة (LMs) عن الظواهر النحوية الرئيسية في اللغة الإنجليزية. يتكون BLiMP من 67 مجموعة بيانات فرعية ، كل منها يحتوي على 1000 زوج من الحد الأدنى لعزل تباينات محددة في بناء الجملة أو التشكل أو الدلالات. يتم إنشاء البيانات تلقائيًا وفقًا لقواعد النحو التي وضعها الخبراء.

انشق، مزق أمثلة
'train' 1،000
  • الميزات :
FeaturesDict({
    'UID': Text(shape=(), dtype=tf.string),
    'field': Text(shape=(), dtype=tf.string),
    'lexically_identical': tf.bool,
    'linguistics_term': Text(shape=(), dtype=tf.string),
    'one_prefix_method': tf.bool,
    'pair_id': tf.int32,
    'sentence_bad': Text(shape=(), dtype=tf.string),
    'sentence_good': Text(shape=(), dtype=tf.string),
    'simple_LM_method': tf.bool,
    'two_prefix_method': tf.bool,
})
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

blimp / advunct_island (التكوين الافتراضي)

  • وصف التكوين : يتضمن هذا التكوين النموذج المساعد.

  • حجم التحميل : 350.86 KiB

  • حجم مجموعة البيانات : 366.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / anaphor_gender_agreement

  • وصف التكوين : يتضمن هذا التكوين النموذج anaphor_gender_agreement.

  • حجم التحميل : 426.51 KiB

  • حجم مجموعة البيانات : 332.31 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / anaphor_number_agreement

  • وصف التكوين : يتضمن هذا التكوين النموذج anaphor_number_agreement.

  • حجم التحميل : 440.29 KiB

  • حجم مجموعة البيانات : 341.07 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / animate_subject_passive

  • وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_passive.

  • حجم التحميل : 451.46 KiB

  • حجم مجموعة البيانات : 345.50 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / animate_subject_trans

  • وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_trans.

  • حجم التحميل : 422.95 KiB

  • حجم مجموعة البيانات : 329.27 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المسبب

  • وصف التكوين : يتضمن هذا التكوين النموذج المسبب.

  • حجم التحميل : 309.73 KiB

  • حجم مجموعة البيانات : 324.36 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المركب_جزيرة

  • وصف التكوين : يتضمن هذا التكوين النموذج المركب_NP_island.

  • حجم التحميل : 383.17 KiB

  • حجم مجموعة البيانات : 398.78 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / تنسيق_البنية_كونستراينت_ كومبليكس_ليفت_برينش

  • وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_كونستراينت_كومبليكس_ليفت_برينش.

  • حجم التحميل : 558.30 KiB

  • حجم مجموعة البيانات : 410.43 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / التنسيق_البنية_التنسيق_الجسم_الاستخراج

  • وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_كونستراينت_وبجيكستراكشن.

  • حجم التحميل : 357.47 KiB

  • حجم مجموعة البيانات : 372.10 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_1.

  • حجم التحميل : 457.66 KiB

  • حجم مجموعة البيانات : 356.93 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_2

  • وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_2.

  • حجم التحميل : 477.40 KiB

  • حجم مجموعة البيانات : 357.01 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / محدد

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_iriform_1.

  • حجم التحميل : 463.80 KiB

  • حجم مجموعة البيانات : 365.08 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / محدد

  • وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_iriform_2.

  • حجم التحميل : 479.35 KiB

  • حجم مجموعة البيانات : 361.76 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_2

  • وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_with_adj_2.

  • حجم التحميل : 514.46 KiB

  • حجم مجموعة البيانات : 379.92 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_iriform_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_1.

  • حجم التحميل : 487.95 KiB

  • حجم مجموعة البيانات : 384.67 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_iriform_2

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_2.

  • حجم التحميل : 516.14 KiB

  • حجم مجموعة البيانات : 384.54 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adjective_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adjective_1.

  • حجم التحميل : 492.85 KiB

  • حجم مجموعة البيانات : 385.25 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / distractor_agreement_relational_noun

  • وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relational_noun.

  • حجم التحميل : 513.33 KiB

  • حجم مجموعة البيانات : 391.45 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / distractor_agreement_relative_clause

  • وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relative_clause.

  • حجم التحميل : 551.53 KiB

  • حجم مجموعة البيانات : 416.14 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / drop_argument

  • وصف التكوين : يتضمن هذا التكوين نموذج drop_argument.

  • حجم التحميل : 297.07 KiB

  • حجم مجموعة البيانات : 311.70 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_1

  • وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_1.

  • حجم التحميل : 402.32 KiB

  • حجم مجموعة البيانات : 417.06 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_2

  • وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_2.

  • حجم التحميل : 417.53 KiB

  • حجم مجموعة البيانات : 432.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_ثير_جسم_الرائد

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_object_raising.

  • حجم التحميل : 537.77 KiB

  • حجم مجموعة البيانات : 423.00 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_ثري_المقادير_1

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_1.

  • حجم التحميل : 348.95 KiB

  • حجم مجموعة البيانات : 363.58 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_المقادير_المقادير_2

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_2.

  • حجم التحميل : 350.80 KiB

  • حجم مجموعة البيانات : 365.43 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجود_الموضوع_الرائد

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_subject_raising.

  • حجم التحميل : 385.21 KiB

  • حجم مجموعة البيانات : 399.84 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / blimp_it_object_raising

  • وصف التكوين : يتضمن هذا التكوين النموذج expletive_it_object_raising.

  • حجم التحميل : 573.88 KiB

  • حجم مجموعة البيانات : 437.58 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المستأنف

  • وصف التكوين : يتضمن هذا التكوين النموذج المستنشق.

  • حجم التحميل : 291.71 KiB

  • حجم مجموعة البيانات : 306.34 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / لازم

  • وصف التكوين : يتضمن هذا التكوين النموذج لازم.

  • حجم التحميل : 298.33 KiB

  • حجم مجموعة البيانات : 312.96 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / غير منتظم_لصق_جزء_الطالب

  • وصف التكوين : يتضمن هذا التكوين النموذج ir Regular_past_participle_adjectives.

  • حجم التحميل : 434.10 KiB

  • حجم مجموعة البيانات : 345.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / غير النظامية_لصق_جزء_الأفعال

  • وصف التكوين : يتضمن هذا التكوين النموذج ir Regular_past_participle_verbs.

  • حجم التحميل : 410.27 KiB

  • حجم مجموعة البيانات : 327.21 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / غير منتظم

  • وصف التكوين : يتضمن هذا التكوين النموذج iriform_plural_subject_verb_agreement_1.

  • حجم التحميل : 449.91 KiB

  • حجم مجموعة البيانات : 366.17 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / غير النظامي_الموضوع_الكلام_الخطيب_المنطاد_

  • وصف التكوين : يتضمن هذا التكوين النموذج iriform_plural_subject_verb_agreement_2.

  • حجم التحميل : 442.75 KiB

  • حجم مجموعة البيانات : 354.70 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / left_branch_island_echo_question

  • وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_echo_question.

  • حجم التحميل : 471.31 KiB

  • حجم مجموعة البيانات : 348.84 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / left_branch_island_simple_question

  • وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_simple_question.

  • حجم التحميل : 335.40 KiB

  • حجم مجموعة البيانات : 351.01 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / matrix_question_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين نموذج المصفوفة_question_npi_licensor_present.

  • حجم التحميل : 447.08 KiB

  • حجم مجموعة البيانات : 354.14 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / npi_present_1

  • وصف التكوين : يتضمن هذا التكوين النموذج npi_present_1.

  • حجم التحميل : 427.75 KiB

  • حجم مجموعة البيانات : 339.68 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / npi_present_2

  • وصف التكوين : يتضمن هذا التكوين النموذج npi_present_2.

  • حجم التحميل : 412.24 KiB

  • حجم مجموعة البيانات : 329.11 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / only_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين النموذج only_npi_licensor_present.

  • حجم التحميل : 448.41 KiB

  • حجم مجموعة البيانات : 349.50 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / only_npi_scope

  • وصف التكوين : يتضمن هذا التكوين النموذج only_npi_scope.

  • حجم التحميل : 570.04 KiB

  • حجم مجموعة البيانات : 408.52 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / سلبي_1

  • وصف التكوين : يتضمن هذا التكوين النموذج passive_1.

  • حجم التحميل : 332.30 KiB

  • حجم مجموعة البيانات : 346.93 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الخامل_2

  • وصف التكوين : يتضمن هذا التكوين النموذج الخامل_2.

  • حجم التحميل : 301.12 KiB

  • حجم مجموعة البيانات : 315.75 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / Princip_A_c_command

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_c_command.

  • حجم التحميل : 515.32 KiB

  • حجم مجموعة البيانات : 388.54 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_case_1

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_case_1.

  • حجم التحميل : 466.05 KiB

  • حجم مجموعة البيانات : 370.87 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_case_2

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_case_2.

  • حجم التحميل : 481.42 KiB

  • حجم مجموعة البيانات : 370.88 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_domain_1

  • وصف التكوين : يتضمن هذا التكوين مبدأ النموذج_A_domain_1.

  • حجم التحميل : 488.15 KiB

  • حجم مجموعة البيانات : 371.62 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_domain_2

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_2.

  • حجم التحميل : 481.63 KiB

  • حجم مجموعة البيانات : 365.92 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_domain_3

  • وصف التكوين : يتضمن هذا التكوين مبدأ النموذج A_domain_3.

  • حجم التحميل : 501.84 KiB

  • حجم مجموعة البيانات : 359.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / Princip_A_reconstruction

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_reconstruction.

  • حجم التحميل : 337.40 KiB

  • حجم مجموعة البيانات : 353.00 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / normal_plural_subject_verb_agreement_1

  • وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_1.

  • حجم التحميل : 441.26 KiB

  • حجم مجموعة البيانات : 359.56 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / normal_plural_subject_verb_agreement_2

  • وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_2.

  • حجم التحميل : 445.78 KiB

  • حجم مجموعة البيانات : 354.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_negation_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_licensor_present.

  • حجم التحميل : 479.49 KiB

  • حجم مجموعة البيانات : 372.30 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_negation_npi_scope

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_scope.

  • حجم التحميل : 600.52 KiB

  • حجم مجموعة البيانات : 431.18 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_subject_island

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_subject_island.

  • حجم التحميل : 357.25 KiB

  • حجم مجموعة البيانات : 372.86 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الكميات الفائقة_1

  • وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_1.

  • حجم التحميل : 372.25 KiB

  • حجم مجموعة البيانات : 360.02 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الكميات الفائقة_2

  • وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_2.

  • حجم التحميل : 504.02 KiB

  • حجم مجموعة البيانات : 360.07 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / صعبة_الصعبة_راسينغ_1

  • وصف التكوين : يتضمن هذا التكوين النموذج hard_vs_raising_1.

  • حجم التحميل : 334.99 KiB

  • حجم مجموعة البيانات : 349.62 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / صعب_على_صعود_2

  • وصف التكوين : يشتمل هذا التكوين على النموذج hard_vs_raising_2.

  • حجم التحميل : 355.54 KiB

  • حجم مجموعة البيانات : 370.17 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / متعد

  • وصف التكوين : يتضمن هذا التكوين النموذج متعدية.

  • حجم التحميل : 449.50 KiB

  • حجم مجموعة البيانات : 334.45 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_island

  • وصف التكوين : يتضمن هذا التكوين نموذج wh_island.

  • حجم التحميل : 438.12 KiB

  • حجم مجموعة البيانات : 343.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_object_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_object_gap.

  • حجم التحميل : 378.35 KiB

  • حجم مجموعة البيانات : 392.99 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_subject_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap.

  • حجم التحميل : 380.84 KiB

  • حجم مجموعة البيانات : 395.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_subject_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap_long_distance.

  • حجم التحميل : 451.82 KiB

  • حجم مجموعة البيانات : 466.53 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_no_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap.

  • حجم التحميل : 374.28 KiB

  • حجم مجموعة البيانات : 388.91 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_no_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap_long_distance.

  • حجم التحميل : 431.08 KiB

  • حجم مجموعة البيانات : 445.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_with_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap.

  • حجم التحميل : 359.16 KiB

  • حجم مجموعة البيانات : 373.79 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_with_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap_long_distance.

  • حجم التحميل : 416.00 KiB

  • حجم مجموعة البيانات : 430.63 KiB

  • أمثلة ( tfds.as_dataframe ):