Khinh khí cầu

  • Mô tả :

BLiMP là một thử thách được đặt ra để đánh giá những mô hình ngôn ngữ (LM) nào biết về các hiện tượng ngữ pháp chính trong tiếng Anh. BLiMP bao gồm 67 bộ dữ liệu con, mỗi bộ chứa 1000 cặp tối thiểu tách biệt những điểm tương phản cụ thể về cú pháp, hình thái học hoặc ngữ nghĩa. Dữ liệu được tạo tự động theo ngữ pháp được tạo bởi chuyên gia.

Tách ra Các ví dụ
'train' 1.000
  • Cấu trúc tính năng :
FeaturesDict({
    'UID': Text(shape=(), dtype=tf.string),
    'field': Text(shape=(), dtype=tf.string),
    'lexically_identical': tf.bool,
    'linguistics_term': Text(shape=(), dtype=tf.string),
    'one_prefix_method': tf.bool,
    'pair_id': tf.int32,
    'sentence_bad': Text(shape=(), dtype=tf.string),
    'sentence_good': Text(shape=(), dtype=tf.string),
    'simple_LM_method': tf.bool,
    'two_prefix_method': tf.bool,
})
  • Tài liệu tính năng :
Tính năng Lớp Hình dạng Loại Sự mô tả
Các tính năng
UID Chữ tf.string
đồng ruộng Chữ tf.string
lexically_identical Tensor tf.bool
linguistics_term Chữ tf.string
one_prefix_method Tensor tf.bool
cặp_id Tensor tf.int32
câu_báo Chữ tf.string
câu_tốt Chữ tf.string
simple_LM_method Tensor tf.bool
two_prefix_method Tensor tf.bool
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

Blimp / adjunct_island (cấu hình mặc định)

  • Mô tả cấu hình : Cấu hình này bao gồm paradigm adjunct_island.

  • Kích thước tải xuống : 350.86 KiB

  • Kích thước tập dữ liệu: 366.47 KiB

Blimp / anaphor_uality_agosystem

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình anaphor_uality_agosystem.

  • Kích thước tải xuống : 426.51 KiB

  • Kích thước tập dữ liệu: 332.31 KiB

Blimp / anaphor_number_agosystem

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình anaphor_number_agosystem.

  • Kích thước tải xuống : 440.29 KiB

  • Kích thước tập dữ liệu: 341.07 KiB

Blimp / animate_subject_passive

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình animate_subject_passive.

  • Kích thước tải xuống : 451.46 KiB

  • Kích thước tập dữ liệu: 345.50 KiB

Blimp / animate_subject_trans

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình animate_subject_trans.

  • Kích thước tải xuống : 422.95 KiB

  • Kích thước tập dữ liệu: 329.27 KiB

phồng rộp / gây bệnh

  • Mô tả cấu hình : Cấu hình này bao gồm nguyên nhân mô hình.

  • Kích thước tải xuống : 309.73 KiB

  • Kích thước tập dữ liệu: 324.36 KiB

Blimp / complex_NP_island

  • Mô tả cấu hình : Cấu hình này bao gồm phức hợp mô hình_NP_island.

  • Kích thước tải xuống : 383.17 KiB

  • Kích thước tập dữ liệu: 398.78 KiB

Blimp / tọa độ_ cấu trúc_constraint_complex_left_branch

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tọa độ_ cấu hình_constraint_complex_left_branch.

  • Kích thước tải xuống : 558.30 KiB

  • Kích thước tập dữ liệu: 410.43 KiB

Blimp / tọa độ_ cấu trúc_constraint_object_extraction

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tọa độ_ cấu trúc_constraint_object_extraction.

  • Kích thước tải xuống : 357.47 KiB

  • Kích thước tập dữ liệu: 372.10 KiB

Blimp / definer_noun_agosystem_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_chính_phục_1.

  • Kích thước tải xuống : 457.66 KiB

  • Kích thước tập dữ liệu: 356.93 KiB

Blimp / definer_noun_agosystem_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_có_chính_phục_2.

  • Kích thước tải xuống : 477.40 KiB

  • Kích thước tập dữ liệu: 357.01 KiB

Blimp / definer_noun_agosystem_irregular_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_thường_cấp_1.

  • Kích thước tải xuống : 463.80 KiB

  • Kích thước tập dữ liệu: 365.08 KiB

Blimp / definer_noun_agosystem_irregular_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigmentir_noun_agosystem_irregular_2).

  • Kích thước tải xuống : 479.35 KiB

  • Kích thước tập dữ liệu: 361.76 KiB

Blimp / definer_noun_agosystem_with_adj_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigm definer_noun_agosystem_with_adj_2).

  • Kích thước tải xuống : 514.46 KiB

  • Kích thước tập dữ liệu: 379.92 KiB

Blimp / definer_noun_agosystem_with_adj_irregular_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định (paradigm definer_noun_agosystem_with_adj_irregular_1).

  • Kích thước tải xuống : 487.95 KiB

  • Kích thước tập dữ liệu: 384.67 KiB

Blimp / definer_noun_agosystem_with_adj_irregular_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định-đại từ_bộ_chung_with_adj_irregular_2.

  • Kích thước tải xuống : 516.14 KiB

  • Kích thước tập dữ liệu: 384.54 KiB

Blimp / definer_noun_agosystem_with_adjective_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình xác định_các_điểm_có_chính_các_with_adjective_1.

  • Kích thước tải xuống : 492.85 KiB

  • Kích thước tập dữ liệu: 385.25 KiB

Blimp / mất trí nhớ

  • Mô tả cấu hình : Cấu hình này bao gồm paradigm distor_agosystem_relational_noun.

  • Kích thước tải xuống : 513.33 KiB

  • Kích thước tập dữ liệu: 391.45 KiB

Blimp / distor_agosystem_relative_clause

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình phân tán_gặp_mặt_tại_cấp.

  • Kích thước tải xuống : 551.53 KiB

  • Kích thước tập dữ liệu: 416.14 KiB

Blimp / drop_argument

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình drop_argument.

  • Kích thước tải xuống : 297.07 KiB

  • Kích thước tập dữ liệu: 311.70 KiB

Blimp / ellipsis_n_bar_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình ellipsis_n_bar_1.

  • Kích thước tải xuống : 402.32 KiB

  • Kích thước tập dữ liệu: 417.06 KiB

Blimp / ellipsis_n_bar_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình ellipsis_n_bar_2.

  • Kích thước tải xuống : 417.53 KiB

  • Kích thước tập dữ liệu: 432.47 KiB

Blimp / survivalential_there_object_raising

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_object_raising.

  • Kích thước tải xuống : 537.77 KiB

  • Kích thước tập dữ liệu : 423.00 KiB

Blimp / tồn tại_there_quantifiers_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_quantifier_1.

  • Kích thước tải xuống : 348.95 KiB

  • Kích thước tập dữ liệu: 363.58 KiB

Blimp / tồn tại_there_quantifiers_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_quantifiers_2.

  • Kích thước tải xuống : 350.80 KiB

  • Kích thước tập dữ liệu: 365.43 KiB

Blimp / survivalential_there_subject_raising

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình tồn tại_there_subject_raising.

  • Kích thước tải xuống : 385.21 KiB

  • Kích thước tập dữ liệu: 399.84 KiB

Blimp / expletive_it_object_raising

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình expletive_it_object_raising.

  • Kích thước tải xuống : 573.88 KiB

  • Kích thước tập dữ liệu: 437.58 KiB

Blimp / inchoative

  • Mô tả cấu hình : Cấu hình này bao gồm phép ẩn dụ của mô hình.

  • Kích thước tải xuống : 291.71 KiB

  • Kích thước tập dữ liệu: 306.34 KiB

Blimp / intransitive

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nội ứng.

  • Kích thước tải xuống : 298.33 KiB

  • Kích thước tập dữ liệu: 312.96 KiB

Blimp / bất thường_past_participle_adjectives

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình bất thường_past_participle_adjectives.

  • Kích thước tải xuống : 434.10 KiB

  • Kích thước tập dữ liệu: 345.74 KiB

Blimp / bất thường_past_participle_verbs

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình bất thường_past_participle_verbs.

  • Kích thước tải xuống : 410.27 KiB

  • Kích thước tập dữ liệu: 327.21 KiB

Blimp / bất thường_plural_subject_verb_agosystem_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình bất quy tắc_plural_subject_verb_agosystem_1.

  • Kích thước tải xuống : 449.91 KiB

  • Kích thước tập dữ liệu: 366.17 KiB

Blimp / bất thường_plural_subject_verb_agosystem_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình bất quy tắc_plural_subject_verb_agosystem_2.

  • Kích thước tải xuống : 442.75 KiB

  • Kích thước tập dữ liệu: 354.70 KiB

Blimp / left_branch_island_echo_question

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình left_branch_island_echo_question.

  • Kích thước tải xuống : 471.31 KiB

  • Kích thước tập dữ liệu: 348.84 KiB

Blimp / left_branch_island_simple_question

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình left_branch_island_simple_question.

  • Kích thước tải xuống : 335.40 KiB

  • Kích thước tập dữ liệu: 351.01 KiB

Blimp / matrix_question_npi_licensor_present

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình ma trận_question_npi_licensor_present.

  • Kích thước tải xuống : 447.08 KiB

  • Kích thước tập dữ liệu: 354.14 KiB

Blimp / npi_present_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình npi_present_1.

  • Kích thước tải xuống : 427.75 KiB

  • Kích thước tập dữ liệu: 339.68 KiB

Blimp / npi_present_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình npi_present_2.

  • Kích thước tải xuống : 412.24 KiB

  • Kích thước tập dữ liệu: 329.11 KiB

Blimp / only_npi_licensor_present

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình only_npi_licensor_present.

  • Kích thước tải xuống : 448.41 KiB

  • Kích thước tập dữ liệu: 349.50 KiB

Blimp / only_npi_scope

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình only_npi_scope.

  • Kích thước tải xuống : 570.04 KiB

  • Kích thước tập dữ liệu: 408.52 KiB

Blimp / passive_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình thụ động_1.

  • Kích thước tải xuống : 332.30 KiB

  • Kích thước tập dữ liệu: 346.93 KiB

Blimp / passive_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình thụ động_2.

  • Kích thước tải xuống : 301.12 KiB

  • Kích thước tập dữ liệu: 315.75 KiB

Blimp / nguyên tắc_A_c_command

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_c_command.

  • Kích thước tải xuống : 515.32 KiB

  • Kích thước tập dữ liệu: 388.54 KiB

Blimp / nguyên tắc_A_case_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_case_1.

  • Kích thước tải xuống : 466.05 KiB

  • Kích thước tập dữ liệu: 370.87 KiB

Blimp / nguyên tắc_A_case_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_case_2.

  • Kích thước tải xuống : 481.42 KiB

  • Kích thước tập dữ liệu: 370.88 KiB

Blimp / nguyên tắc_A_domain_1

  • Mô tả cấu hình : Cấu hình này bao gồm nguyên tắc mô hình_A_domain_1.

  • Kích thước tải xuống : 488.15 KiB

  • Kích thước tập dữ liệu: 371.62 KiB

Blimp / nguyên tắc_A_domain_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_domain_2.

  • Kích thước tải xuống : 481.63 KiB

  • Kích thước tập dữ liệu: 365.92 KiB

Blimp / nguyên tắc_A_domain_3

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình nguyên tắc_A_domain_3.

  • Kích thước tải xuống : 501.84 KiB

  • Kích thước tập dữ liệu: 359.74 KiB

Blimp / nguyên tắc_A_reconstruction

  • Mô tả cấu hình : Cấu hình này bao gồm nguyên tắc mô hình_A_reconstruction.

  • Kích thước tải xuống : 337.40 KiB

  • Kích thước tập dữ liệu : 353.00 KiB

Blimp / regular_plural_subject_verb_agosystem_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình regular_plural_subject_verb_agosystem_1.

  • Kích thước tải xuống : 441.26 KiB

  • Kích thước tập dữ liệu: 359.56 KiB

Blimp / regular_plural_subject_verb_agosystem_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình regular_plural_subject_verb_agosystem_2.

  • Kích thước tải xuống : 445.78 KiB

  • Kích thước tập dữ liệu: 354.47 KiB

Blimp / sentential_negation_npi_licensor_present

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_negation_npi_licensor_present.

  • Kích thước tải xuống : 479.49 KiB

  • Kích thước tập dữ liệu: 372.30 KiB

Blimp / sentential_negation_npi_scope

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_negation_npi_scope.

  • Kích thước tải xuống : 600.52 KiB

  • Kích thước tập dữ liệu: 431.18 KiB

Blimp / sentential_subject_island

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình sentential_subject_island.

  • Kích thước tải xuống : 357.25 KiB

  • Kích thước tập dữ liệu: 372.86 KiB

Blimp / superlative_quantifiers_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình superlative_quantifiers_1.

  • Kích thước tải xuống : 372.25 KiB

  • Kích thước tập dữ liệu: 360.02 KiB

Blimp / superlative_quantifiers_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình superlative_quantifiers_2.

  • Kích thước tải xuống : 504.02 KiB

  • Kích thước tập dữ liệu: 360.07 KiB

Blimp / glam_vs_raising_1

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình solid_vs_raising_1.

  • Kích thước tải xuống : 334.99 KiB

  • Kích thước tập dữ liệu: 349.62 KiB

Blimp / glam_vs_raising_2

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình solid_vs_raising_2.

  • Kích thước tải xuống : 355.54 KiB

  • Kích thước tập dữ liệu: 370.17 KiB

Blimp / bắc cầu

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình bắc cầu.

  • Kích thước tải xuống : 449.50 KiB

  • Kích thước tập dữ liệu: 334.45 KiB

Blimp / wh_island

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_island.

  • Kích thước tải xuống : 438.12 KiB

  • Kích thước tập dữ liệu: 343.47 KiB

Blimp / wh_questions_object_gap

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_object_gap.

  • Kích thước tải xuống : 378.35 KiB

  • Kích thước tập dữ liệu: 392.99 KiB

Blimp / wh_questions_subject_gap

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_subject_gap.

  • Kích thước tải xuống : 380.84 KiB

  • Kích thước tập dữ liệu: 395.47 KiB

Blimp / wh_questions_subject_gap_long_distance

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_questions_subject_gap_long_distance.

  • Kích thước tải xuống : 451.82 KiB

  • Kích thước tập dữ liệu: 466.53 KiB

Blimp / wh_vs_that_no_gap

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_no_gap.

  • Kích thước tải xuống : 374.28 KiB

  • Kích thước tập dữ liệu: 388.91 KiB

Blimp / wh_vs_that_no_gap_long_distance

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_no_gap_long_distance.

  • Kích thước tải xuống : 431.08 KiB

  • Kích thước tập dữ liệu: 445.74 KiB

Blimp / wh_vs_that_with_gap

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_with_gap.

  • Kích thước tải xuống : 359.16 KiB

  • Kích thước tập dữ liệu: 373.79 KiB

Blimp / wh_vs_that_with_gap_long_distance

  • Mô tả cấu hình : Cấu hình này bao gồm mô hình wh_vs_that_with_gap_long_distance.

  • Kích thước tải xuống : 416.00 KiB

  • Kích thước tập dữ liệu: 430.63 KiB