- الوصف :
BLiMP عبارة عن تحدي لتقييم ما تعرفه نماذج اللغة (LMs) عن الظواهر النحوية الرئيسية في اللغة الإنجليزية. يتكون BLiMP من 67 مجموعة بيانات فرعية ، كل منها يحتوي على 1000 زوج من الحد الأدنى لعزل تباينات معينة في بناء الجملة أو التشكل أو الدلالات. يتم إنشاء البيانات تلقائيًا وفقًا لقواعد النحو التي وضعها الخبراء.
وثائق إضافية : استكشف في الأوراق باستخدام الرمز
الصفحة الرئيسية : https://github.com/alexwarstadt/blimp/tree/master/
كود المصدر :
tfds.datasets.blimp.Builderإصدارات :
-
0.1.0(افتراضي): لا توجد ملاحظات حول الإصدار.
-
التخزين المؤقت التلقائي ( الوثائق ): نعم
الانقسامات :
| انشق، مزق | أمثلة |
|---|---|
'train' | 1،000 |
- هيكل الميزة :
FeaturesDict({
'UID': Text(shape=(), dtype=string),
'field': Text(shape=(), dtype=string),
'lexically_identical': bool,
'linguistics_term': Text(shape=(), dtype=string),
'one_prefix_method': bool,
'pair_id': int32,
'sentence_bad': Text(shape=(), dtype=string),
'sentence_good': Text(shape=(), dtype=string),
'simple_LM_method': bool,
'two_prefix_method': bool,
})
- وثائق الميزة :
| ميزة | فصل | شكل | نوع | وصف |
|---|---|---|---|---|
| الميزات | ||||
| المعرف الفريد | نص | سلسلة | ||
| مجال | نص | سلسلة | ||
| متطابقة معجمية | موتر | منطقي | ||
| اللغويات_المصطلح | نص | سلسلة | ||
| طريقة_prefix_ واحدة | موتر | منطقي | ||
| معرّف الزوج | موتر | int32 | ||
| الجملة_سيئة | نص | سلسلة | ||
| الجملة_جيدة | نص | سلسلة | ||
| بسيطة_أسلوب_م | موتر | منطقي | ||
| two_prefix_method | موتر | منطقي |
المفاتيح الخاضعة للإشراف (انظر المستند
as_supervised):Noneالشكل ( tfds.show_examples ): غير مدعوم.
الاقتباس :
@article{warstadt2019blimp,
title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
journal={arXiv preprint arXiv:1912.00582},
year={2019}
}
blimp / advunct_island (التكوين الافتراضي)
وصف التكوين : يتضمن هذا التكوين النموذج المساعد.
حجم التحميل :
350.86 KiBحجم مجموعة البيانات :
366.47 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / anaphor_gender_agreement
وصف التكوين : يتضمن هذا التكوين النموذج anaphor_gender_agreement.
حجم التحميل :
426.51 KiBحجم مجموعة البيانات :
332.31 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / anaphor_number_agreement
وصف التكوين : يتضمن هذا التكوين النموذج anaphor_number_agreement.
حجم التحميل :
440.29 KiBحجم مجموعة البيانات :
341.07 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / animate_subject_passive
وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_passive.
حجم التحميل :
451.46 KiBحجم مجموعة البيانات :
345.50 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / animate_subject_trans
وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_trans.
حجم التحميل :
422.95 KiBحجم مجموعة البيانات :
329.27 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المسبب
وصف التكوين : يتضمن هذا التكوين النموذج المسبب.
حجم التحميل :
309.73 KiBحجم مجموعة البيانات :
324.36 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المركب_جزيرة
وصف التكوين : يتضمن هذا التكوين النموذج المركب_NP_island.
حجم التحميل :
383.17 KiBحجم مجموعة البيانات :
398.78 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / التنسيق_البنية_المتقنة
وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_constraint_complex_left_branch.
حجم التحميل :
558.30 KiBحجم مجموعة البيانات :
410.43 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / تنسيق_البنية_كونستراينت_الجسم_الاستخراج
وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_كونستراينت_وبجيكستراكشن.
حجم التحميل :
357.47 KiBحجم مجموعة البيانات :
372.10 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_1.
حجم التحميل :
457.66 KiBحجم مجموعة البيانات :
356.93 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_2
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_2.
حجم التحميل :
477.40 KiBحجم مجموعة البيانات :
357.01 KiBأمثلة ( tfds.as_dataframe ):
منطاد / محدد
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_iriform_1.
حجم التحميل :
463.80 KiBحجم مجموعة البيانات :
365.08 KiBأمثلة ( tfds.as_dataframe ):
منطاد / محدد
وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_iriform_2.
حجم التحميل :
479.35 KiBحجم مجموعة البيانات :
361.76 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_2
وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_with_adj_2.
حجم التحميل :
514.46 KiBحجم مجموعة البيانات :
379.92 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_iriform_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_1.
حجم التحميل :
487.95 KiBحجم مجموعة البيانات :
384.67 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_iriform_2
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_2.
حجم التحميل :
516.14 KiBحجم مجموعة البيانات :
384.54 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adjective_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adjective_1.
حجم التحميل :
492.85 KiBحجم مجموعة البيانات :
385.25 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / distractor_agreement_relational_noun
وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relational_noun.
حجم التحميل :
513.33 KiBحجم مجموعة البيانات :
391.45 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / distractor_agreement_relative_clause
وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relative_clause.
حجم التحميل :
551.53 KiBحجم مجموعة البيانات :
416.14 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / drop_argument
وصف التكوين : يتضمن هذا التكوين نموذج drop_argument.
حجم التحميل :
297.07 KiBحجم مجموعة البيانات :
311.70 KiBأمثلة ( tfds.as_dataframe ):
blimp / ellipsis_n_bar_1
وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_1.
حجم التحميل :
402.32 KiBحجم مجموعة البيانات :
417.06 KiBأمثلة ( tfds.as_dataframe ):
blimp / ellipsis_n_bar_2
وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_2.
حجم التحميل :
417.53 KiBحجم مجموعة البيانات :
432.47 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_ثير_جسم_الرائد
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_object_raising.
حجم التحميل :
537.77 KiBحجم مجموعة البيانات :
423.00 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_المقادير_المقادير_1
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_1.
حجم التحميل :
348.95 KiBحجم مجموعة البيانات :
363.58 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_المقادير_المقادير_2
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_2.
حجم التحميل :
350.80 KiBحجم مجموعة البيانات :
365.43 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_الموضوع_الرائد
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_subject_raising.
حجم التحميل :
385.21 KiBحجم مجموعة البيانات :
399.84 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / blimp_it_object_raising
وصف التكوين : يتضمن هذا التكوين النموذج expletive_it_object_raising.
حجم التحميل :
573.88 KiBحجم مجموعة البيانات :
437.58 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / المستأنف
وصف التكوين : يتضمن هذا التكوين النموذج المستنشق.
حجم التحميل :
291.71 KiBحجم مجموعة البيانات :
306.34 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / لازم
وصف التكوين : يتضمن هذا التكوين النموذج لازم.
حجم التحميل :
298.33 KiBحجم مجموعة البيانات :
312.96 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / غير النظامية_اللصق_الأجزاء
وصف التكوين : يشتمل هذا التكوين على النموذج iredom_past_participle_adjectives.
حجم التحميل :
434.10 KiBحجم مجموعة البيانات :
345.74 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / غير النظامية_لصق_جزء_الأفعال
وصف التكوين : يتضمن هذا التكوين النموذج ir Regular_past_participle_verbs.
حجم التحميل :
410.27 KiBحجم مجموعة البيانات :
327.21 KiBأمثلة ( tfds.as_dataframe ):
منطاد / غير منتظم
وصف التكوين : يتضمن هذا التكوين النموذج iriform_plural_subject_verb_agreement_1.
حجم التحميل :
449.91 KiBحجم مجموعة البيانات :
366.17 KiBأمثلة ( tfds.as_dataframe ):
منطاد / غير منتظم
وصف التكوين : يتضمن هذا التكوين النموذج irnorm_plural_subject_verb_agreement_2.
حجم التحميل :
442.75 KiBحجم مجموعة البيانات :
354.70 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / left_branch_island_echo_question
وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_echo_question.
حجم التحميل :
471.31 KiBحجم مجموعة البيانات :
348.84 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / left_branch_island_simple_question
وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_simple_question.
حجم التحميل :
335.40 KiBحجم مجموعة البيانات :
351.01 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / matrix_question_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين نموذج المصفوفة_question_npi_licensor_present.
حجم التحميل :
447.08 KiBحجم مجموعة البيانات :
354.14 KiBأمثلة ( tfds.as_dataframe ):
blimp / npi_present_1
وصف التكوين : يتضمن هذا التكوين النموذج npi_present_1.
حجم التحميل :
427.75 KiBحجم مجموعة البيانات :
339.68 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / npi_present_2
وصف التكوين : يتضمن هذا التكوين النموذج npi_present_2.
حجم التحميل :
412.24 KiBحجم مجموعة البيانات :
329.11 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / only_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين النموذج only_npi_licensor_present.
حجم التحميل :
448.41 KiBحجم مجموعة البيانات :
349.50 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / only_npi_scope
وصف التكوين : يتضمن هذا التكوين النموذج only_npi_scope.
حجم التحميل :
570.04 KiBحجم مجموعة البيانات :
408.52 KiBأمثلة ( tfds.as_dataframe ):
منطاد / سلبي_1
وصف التكوين : يتضمن هذا التكوين النموذج passive_1.
حجم التحميل :
332.30 KiBحجم مجموعة البيانات :
346.93 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الخامل_2
وصف التكوين : يتضمن هذا التكوين النموذج الخامل_2.
حجم التحميل :
301.12 KiBحجم مجموعة البيانات :
315.75 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_c_command
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_c_command.
حجم التحميل :
515.32 KiBحجم مجموعة البيانات :
388.54 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_case_1
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_case_1.
حجم التحميل :
466.05 KiBحجم مجموعة البيانات :
370.87 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_case_2
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_case_2.
حجم التحميل :
481.42 KiBحجم مجموعة البيانات :
370.88 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_domain_1
وصف التكوين : يتضمن هذا التكوين مبدأ النموذج_A_domain_1.
حجم التحميل :
488.15 KiBحجم مجموعة البيانات :
371.62 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_domain_2
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_2.
حجم التحميل :
481.63 KiBحجم مجموعة البيانات :
365.92 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_domain_3
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_3.
حجم التحميل :
501.84 KiBحجم مجموعة البيانات :
359.74 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_reconstruction
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_reconstruction.
حجم التحميل :
337.40 KiBحجم مجموعة البيانات :
353.00 KiBأمثلة ( tfds.as_dataframe ):
blimp / normal_plural_subject_verb_agreement_1
وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_1.
حجم التحميل :
441.26 KiBحجم مجموعة البيانات :
359.56 KiBأمثلة ( tfds.as_dataframe ):
blimp / normal_plural_subject_verb_agreement_2
وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_2.
حجم التحميل :
445.78 KiBحجم مجموعة البيانات :
354.47 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / sentential_negation_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_licensor_present.
حجم التحميل :
479.49 KiBحجم مجموعة البيانات :
372.30 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / sentential_negation_npi_scope
وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_scope.
حجم التحميل :
600.52 KiBحجم مجموعة البيانات :
431.18 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / sentential_subject_island
وصف التكوين : يتضمن هذا التكوين نموذج sentential_subject_island.
حجم التحميل :
357.25 KiBحجم مجموعة البيانات :
372.86 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الكميات الفائقة_1
وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_1.
حجم التحميل :
372.25 KiBحجم مجموعة البيانات :
360.02 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / الكميات الفائقة_2
وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_2.
حجم التحميل :
504.02 KiBحجم مجموعة البيانات :
360.07 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / صعبة_الصعبة_راسينغ_1
وصف التكوين : يتضمن هذا التكوين النموذج hard_vs_raising_1.
حجم التحميل :
334.99 KiBحجم مجموعة البيانات :
349.62 KiBأمثلة ( tfds.as_dataframe ):
منطاد / صعب_على_صعود_2
وصف التكوين : يشتمل هذا التكوين على النموذج hard_vs_raising_2.
حجم التحميل :
355.54 KiBحجم مجموعة البيانات :
370.17 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / متعد
وصف التكوين : يتضمن هذا التكوين النموذج متعدية.
حجم التحميل :
449.50 KiBحجم مجموعة البيانات :
334.45 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_island
وصف التكوين : يتضمن هذا التكوين نموذج wh_island.
حجم التحميل :
438.12 KiBحجم مجموعة البيانات :
343.47 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_object_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_object_gap.
حجم التحميل :
378.35 KiBحجم مجموعة البيانات :
392.99 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_subject_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap.
حجم التحميل :
380.84 KiBحجم مجموعة البيانات :
395.47 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_subject_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap_long_distance.
حجم التحميل :
451.82 KiBحجم مجموعة البيانات :
466.53 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_no_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap.
حجم التحميل :
374.28 KiBحجم مجموعة البيانات :
388.91 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_no_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap_long_distance.
حجم التحميل :
431.08 KiBحجم مجموعة البيانات :
445.74 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_with_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap.
حجم التحميل :
359.16 KiBحجم مجموعة البيانات :
373.79 KiBأمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_with_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap_long_distance.
حجم التحميل :
416.00 KiBحجم مجموعة البيانات :
430.63 KiBأمثلة ( tfds.as_dataframe ):