- Mô tả :
BLiMP là một thử thách được đặt ra để đánh giá những mô hình ngôn ngữ (LM) nào biết về các hiện tượng ngữ pháp chính trong tiếng Anh. BLiMP bao gồm 67 bộ dữ liệu con, mỗi bộ chứa 1000 cặp tối thiểu tách biệt những điểm tương phản cụ thể về cú pháp, hình thái học hoặc ngữ nghĩa. Dữ liệu được tạo tự động theo ngữ pháp được tạo bởi chuyên gia.
Trang chủ : https://github.com/alexwarstadt/blimp/tree/master/
Mã nguồn :
tfds.text.Blimp
Các phiên bản :
-
0.1.0
(mặc định): Không có ghi chú phát hành.
-
Tự động lưu vào bộ nhớ đệm ( tài liệu ): Có
Tách :
Tách ra | Các ví dụ |
---|---|
'train' | 1.000 |
- Cấu trúc tính năng :
FeaturesDict({
'UID': Text(shape=(), dtype=tf.string),
'field': Text(shape=(), dtype=tf.string),
'lexically_identical': tf.bool,
'linguistics_term': Text(shape=(), dtype=tf.string),
'one_prefix_method': tf.bool,
'pair_id': tf.int32,
'sentence_bad': Text(shape=(), dtype=tf.string),
'sentence_good': Text(shape=(), dtype=tf.string),
'simple_LM_method': tf.bool,
'two_prefix_method': tf.bool,
})
- Tài liệu tính năng :
Tính năng | Lớp | Hình dạng | Loại | Sự mô tả |
---|---|---|---|---|
Các tính năng | ||||
UID | Chữ | tf.string | ||
đồng ruộng | Chữ | tf.string | ||
lexically_identical | Tensor | tf.bool | ||
linguistics_term | Chữ | tf.string | ||
one_prefix_method | Tensor | tf.bool | ||
cặp_id | Tensor | tf.int32 | ||
câu_báo | Chữ | tf.string | ||
câu_tốt | Chữ | tf.string | ||
simple_LM_method | Tensor | tf.bool | ||
two_prefix_method | Tensor | tf.bool |
Khóa được giám sát (Xem
as_supervised
doc ):None
Hình ( tfds.show_examples ): Không được hỗ trợ.
Ví dụ ( tfds.as_dataframe ): Thiếu.
Trích dẫn :
@article{warstadt2019blimp,
title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
journal={arXiv preprint arXiv:1912.00582},
year={2019}
}
Blimp / adjunct_island (cấu hình mặc định)
Mô tả cấu hình : Cấu hình này bao gồm paradigm adjunct_island.
Kích thước tải xuống :
350.86 KiB
Kích thước tập dữ liệu:
366.47 KiB
Blimp / anaphor_uality_agosystem
Mô tả cấu hình : Cấu hình này bao gồm mô hình anaphor_uality_agosystem.
Kích thước tải xuống :
426.51 KiB
Kích thước tập dữ liệu:
332.31 KiB
Blimp / anaphor_number_agosystem
Mô tả cấu hình : Cấu hình này bao gồm mô hình anaphor_number_agosystem.
Kích thước tải xuống :
440.29 KiB
Kích thước tập dữ liệu:
341.07 KiB
Blimp / animate_subject_passive
Mô tả cấu hình : Cấu hình này bao gồm mô hình animate_subject_passive.
Kích thước tải xuống :
451.46 KiB
Kích thước tập dữ liệu:
345.50 KiB
Blimp / animate_subject_trans
Mô tả cấu hình : Cấu hình này bao gồm mô hình animate_subject_trans.
Kích thước tải xuống :
422.95 KiB
Kích thước tập dữ liệu:
329.27 KiB
phồng rộp / gây bệnh
Mô tả cấu hình : Cấu hình này bao gồm nguyên nhân mô hình.
Kích thước tải xuống :
309.73 KiB
Kích thước tập dữ liệu:
324.36 KiB
Blimp / complex_NP_island
Mô tả cấu hình : Cấu hình này bao gồm phức hợp mô hình_NP_island.
Kích thước tải xuống :
383.17 KiB
Kích thước tập dữ liệu:
398.78 KiB
Blimp / tọa độ_ cấu trúc_constraint_complex_left_branch
Mô tả cấu hình : Cấu hình này bao gồm mô hình tọa độ_ cấu hình_constraint_complex_left_branch.
Kích thước tải xuống :
558.30 KiB
Kích thước tập dữ liệu:
410.43 KiB
Blimp / tọa độ_ cấu trúc_constraint_object_extraction
Mô tả cấu hình : Cấu hình này bao gồm mô hình tọa độ_ cấu trúc_constraint_object_extraction.
Kích thước tải xuống :
357.47 KiB
Kích thước tập dữ liệu:
372.10 KiB
Blimp / definer_noun_agosystem_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_chính_phục_1.
Kích thước tải xuống :
457.66 KiB
Kích thước tập dữ liệu:
356.93 KiB
Blimp / definer_noun_agosystem_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_có_chính_phục_2.
Kích thước tải xuống :
477.40 KiB
Kích thước tập dữ liệu:
357.01 KiB
Blimp / definer_noun_agosystem_irregular_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_thường_cấp_1.
Kích thước tải xuống :
463.80 KiB
Kích thước tập dữ liệu:
365.08 KiB
Blimp / definer_noun_agosystem_irregular_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigmentir_noun_agosystem_irregular_2).
Kích thước tải xuống :
479.35 KiB
Kích thước tập dữ liệu:
361.76 KiB
Blimp / definer_noun_agosystem_with_adj_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigm definer_noun_agosystem_with_adj_2).
Kích thước tải xuống :
514.46 KiB
Kích thước tập dữ liệu:
379.92 KiB
Blimp / definer_noun_agosystem_with_adj_irregular_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigm definer_noun_agosystem_with_adj_irregular_1).
Kích thước tải xuống :
487.95 KiB
Kích thước tập dữ liệu:
384.67 KiB
Blimp / definer_noun_agosystem_with_adj_irregular_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định-đại từ_bộ_chung_with_adj_irregular_2.
Kích thước tải xuống :
516.14 KiB
Kích thước tập dữ liệu:
384.54 KiB
Blimp / definer_noun_agosystem_with_adjective_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_có_chính_các_with_adjective_1.
Kích thước tải xuống :
492.85 KiB
Kích thước tập dữ liệu:
385.25 KiB
Blimp / mất trí nhớ
Mô tả cấu hình : Cấu hình này bao gồm paradigm distor_agosystem_relational_noun.
Kích thước tải xuống :
513.33 KiB
Kích thước tập dữ liệu:
391.45 KiB
Blimp / distor_agosystem_relative_clause
Mô tả cấu hình : Cấu hình này bao gồm mô hình phân tán_gặp_mặt_tại_cấp.
Kích thước tải xuống :
551.53 KiB
Kích thước tập dữ liệu:
416.14 KiB
Blimp / drop_argument
Mô tả cấu hình : Cấu hình này bao gồm mô hình drop_argument.
Kích thước tải xuống :
297.07 KiB
Kích thước tập dữ liệu:
311.70 KiB
Blimp / ellipsis_n_bar_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình ellipsis_n_bar_1.
Kích thước tải xuống :
402.32 KiB
Kích thước tập dữ liệu:
417.06 KiB
Blimp / ellipsis_n_bar_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình ellipsis_n_bar_2.
Kích thước tải xuống :
417.53 KiB
Kích thước tập dữ liệu:
432.47 KiB
Blimp / survivalential_there_object_raising
Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_object_raising.
Kích thước tải xuống :
537.77 KiB
Kích thước tập dữ liệu :
423.00 KiB
Blimp / tồn tại_there_quantifiers_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_quantifier_1.
Kích thước tải xuống :
348.95 KiB
Kích thước tập dữ liệu:
363.58 KiB
Blimp / tồn tại_there_quantifiers_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_quantifiers_2.
Kích thước tải xuống :
350.80 KiB
Kích thước tập dữ liệu:
365.43 KiB
Blimp / survivalential_there_subject_raising
Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_subject_raising.
Kích thước tải xuống :
385.21 KiB
Kích thước tập dữ liệu:
399.84 KiB
Blimp / expletive_it_object_raising
Mô tả cấu hình : Cấu hình này bao gồm mô hình expletive_it_object_raising.
Kích thước tải xuống :
573.88 KiB
Kích thước tập dữ liệu:
437.58 KiB
Blimp / inchoative
Mô tả cấu hình : Cấu hình này bao gồm phép ẩn dụ của mô hình.
Kích thước tải xuống :
291.71 KiB
Kích thước tập dữ liệu:
306.34 KiB
Blimp / intransitive
Mô tả cấu hình : Cấu hình này bao gồm mô hình nội ứng.
Kích thước tải xuống :
298.33 KiB
Kích thước tập dữ liệu:
312.96 KiB
Blimp / bất thường_past_participle_adjectives
Mô tả cấu hình : Cấu hình này bao gồm mô hình bất thường_past_participle_adjectives.
Kích thước tải xuống :
434.10 KiB
Kích thước tập dữ liệu:
345.74 KiB
Blimp / bất thường_past_participle_verbs
Mô tả cấu hình : Cấu hình này bao gồm mô hình bất thường_past_participle_verbs.
Kích thước tải xuống :
410.27 KiB
Kích thước tập dữ liệu:
327.21 KiB
Blimp / bất thường_plural_subject_verb_agosystem_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình bất quy tắc_plural_subject_verb_agosystem_1.
Kích thước tải xuống :
449.91 KiB
Kích thước tập dữ liệu:
366.17 KiB
Blimp / bất thường_plural_subject_verb_agosystem_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình bất quy tắc_plural_subject_verb_agosystem_2.
Kích thước tải xuống :
442.75 KiB
Kích thước tập dữ liệu:
354.70 KiB
Blimp / left_branch_island_echo_question
Mô tả cấu hình : Cấu hình này bao gồm mô hình left_branch_island_echo_question.
Kích thước tải xuống :
471.31 KiB
Kích thước tập dữ liệu:
348.84 KiB
Blimp / left_branch_island_simple_question
Mô tả cấu hình : Cấu hình này bao gồm mô hình left_branch_island_simple_question.
Kích thước tải xuống :
335.40 KiB
Kích thước tập dữ liệu:
351.01 KiB
Blimp / matrix_question_npi_licensor_present
Mô tả cấu hình : Cấu hình này bao gồm mô hình ma trận_question_npi_licensor_present.
Kích thước tải xuống :
447.08 KiB
Kích thước tập dữ liệu:
354.14 KiB
Blimp / npi_present_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình npi_present_1.
Kích thước tải xuống :
427.75 KiB
Kích thước tập dữ liệu:
339.68 KiB
Blimp / npi_present_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình npi_present_2.
Kích thước tải xuống :
412.24 KiB
Kích thước tập dữ liệu:
329.11 KiB
Blimp / only_npi_licensor_present
Mô tả cấu hình : Cấu hình này bao gồm mô hình only_npi_licensor_present.
Kích thước tải xuống :
448.41 KiB
Kích thước tập dữ liệu:
349.50 KiB
Blimp / only_npi_scope
Mô tả cấu hình : Cấu hình này bao gồm mô hình only_npi_scope.
Kích thước tải xuống :
570.04 KiB
Kích thước tập dữ liệu:
408.52 KiB
Blimp / passive_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình thụ động_1.
Kích thước tải xuống :
332.30 KiB
Kích thước tập dữ liệu:
346.93 KiB
Blimp / passive_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình thụ động_2.
Kích thước tải xuống :
301.12 KiB
Kích thước tập dữ liệu:
315.75 KiB
Blimp / nguyên tắc_A_c_command
Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_c_command.
Kích thước tải xuống :
515.32 KiB
Kích thước tập dữ liệu:
388.54 KiB
Blimp / nguyên tắc_A_case_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_case_1.
Kích thước tải xuống :
466.05 KiB
Kích thước tập dữ liệu:
370.87 KiB
Blimp / nguyên tắc_A_case_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_case_2.
Kích thước tải xuống :
481.42 KiB
Kích thước tập dữ liệu:
370.88 KiB
Blimp / nguyên tắc_A_domain_1
Mô tả cấu hình : Cấu hình này bao gồm nguyên tắc mô hình_A_domain_1.
Kích thước tải xuống :
488.15 KiB
Kích thước tập dữ liệu:
371.62 KiB
Blimp / nguyên tắc_A_domain_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_domain_2.
Kích thước tải xuống :
481.63 KiB
Kích thước tập dữ liệu:
365.92 KiB
Blimp / nguyên tắc_A_domain_3
Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_domain_3.
Kích thước tải xuống :
501.84 KiB
Kích thước tập dữ liệu:
359.74 KiB
Blimp / nguyên tắc_A_reconstruction
Mô tả cấu hình : Cấu hình này bao gồm nguyên tắc mô hình_A_reconstruction.
Kích thước tải xuống :
337.40 KiB
Kích thước tập dữ liệu :
353.00 KiB
Blimp / regular_plural_subject_verb_agosystem_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình regular_plural_subject_verb_agosystem_1.
Kích thước tải xuống :
441.26 KiB
Kích thước tập dữ liệu:
359.56 KiB
Blimp / regular_plural_subject_verb_agosystem_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình regular_plural_subject_verb_agosystem_2.
Kích thước tải xuống :
445.78 KiB
Kích thước tập dữ liệu:
354.47 KiB
Blimp / sentential_negation_npi_licensor_present
Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_negation_npi_licensor_present.
Kích thước tải xuống :
479.49 KiB
Kích thước tập dữ liệu:
372.30 KiB
Blimp / sentential_negation_npi_scope
Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_negation_npi_scope.
Kích thước tải xuống :
600.52 KiB
Kích thước tập dữ liệu:
431.18 KiB
Blimp / sentential_subject_island
Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_subject_island.
Kích thước tải xuống :
357.25 KiB
Kích thước tập dữ liệu:
372.86 KiB
Blimp / superlative_quantifiers_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình superlative_quantifiers_1.
Kích thước tải xuống :
372.25 KiB
Kích thước tập dữ liệu:
360.02 KiB
Blimp / superlative_quantifiers_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình superlative_quantifiers_2.
Kích thước tải xuống :
504.02 KiB
Kích thước tập dữ liệu:
360.07 KiB
Blimp / glam_vs_raising_1
Mô tả cấu hình : Cấu hình này bao gồm mô hình solid_vs_raising_1.
Kích thước tải xuống :
334.99 KiB
Kích thước tập dữ liệu:
349.62 KiB
Blimp / glam_vs_raising_2
Mô tả cấu hình : Cấu hình này bao gồm mô hình solid_vs_raising_2.
Kích thước tải xuống :
355.54 KiB
Kích thước tập dữ liệu:
370.17 KiB
Blimp / bắc cầu
Mô tả cấu hình : Cấu hình này bao gồm mô hình bắc cầu.
Kích thước tải xuống :
449.50 KiB
Kích thước tập dữ liệu:
334.45 KiB
Blimp / wh_island
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_island.
Kích thước tải xuống :
438.12 KiB
Kích thước tập dữ liệu:
343.47 KiB
Blimp / wh_questions_object_gap
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_object_gap.
Kích thước tải xuống :
378.35 KiB
Kích thước tập dữ liệu:
392.99 KiB
Blimp / wh_questions_subject_gap
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_subject_gap.
Kích thước tải xuống :
380.84 KiB
Kích thước tập dữ liệu:
395.47 KiB
Blimp / wh_questions_subject_gap_long_distance
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_subject_gap_long_distance.
Kích thước tải xuống :
451.82 KiB
Kích thước tập dữ liệu:
466.53 KiB
Blimp / wh_vs_that_no_gap
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_no_gap.
Kích thước tải xuống :
374.28 KiB
Kích thước tập dữ liệu:
388.91 KiB
Blimp / wh_vs_that_no_gap_long_distance
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_no_gap_long_distance.
Kích thước tải xuống :
431.08 KiB
Kích thước tập dữ liệu:
445.74 KiB
Blimp / wh_vs_that_with_gap
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_with_gap.
Kích thước tải xuống :
359.16 KiB
Kích thước tập dữ liệu:
373.79 KiB
Blimp / wh_vs_that_with_gap_long_distance
Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_with_gap_long_distance.
Kích thước tải xuống :
416.00 KiB
Kích thước tập dữ liệu:
430.63 KiB