q4mre

  • คำอธิบาย :

ชุดข้อมูล QA4MRE ถูกสร้างขึ้นสำหรับงานที่ใช้ร่วมกันของ CLEF 2011/2012/2013 เพื่อส่งเสริมการวิจัยในการตอบคำถามและความเข้าใจในการอ่าน ชุดข้อมูลประกอบด้วยข้อความสนับสนุนและชุดคำถามที่สอดคล้องกับข้อความ มีหลายตัวเลือกสำหรับคำตอบสำหรับคำถามแต่ละข้อ ซึ่งมีเพียงตัวเลือกเดียวที่ถูกต้อง ชุดข้อมูลการฝึกอบรมและการทดสอบพร้อมใช้งานสำหรับแทร็กหลัก มีเอกสารมาตรฐานทองคำเพิ่มเติมสำหรับการศึกษานำร่องสองเรื่อง: ฉบับหนึ่งเกี่ยวกับข้อมูลอัลไซเมอร์ และอีกฉบับเป็นข้อมูลการสอบเข้า

FeaturesDict({
    'answer_options': Sequence({
        'answer_id': Text(shape=(), dtype=string),
        'answer_str': Text(shape=(), dtype=string),
    }),
    'correct_answer_id': Text(shape=(), dtype=string),
    'correct_answer_str': Text(shape=(), dtype=string),
    'document_id': Text(shape=(), dtype=string),
    'document_str': Text(shape=(), dtype=string),
    'question_id': Text(shape=(), dtype=string),
    'question_str': Text(shape=(), dtype=string),
    'test_id': Text(shape=(), dtype=string),
    'topic_id': Text(shape=(), dtype=string),
    'topic_name': Text(shape=(), dtype=string),
})
  • เอกสารคุณสมบัติ :
คุณสมบัติ ระดับ รูปร่าง Dประเภท คำอธิบาย
คุณสมบัติDict
คำตอบ_ตัวเลือก ลำดับ
answer_options/answer_id ข้อความ สตริง
answer_options/answer_str ข้อความ สตริง
ถูกต้อง_answer_id ข้อความ สตริง
ถูกต้อง_answer_str ข้อความ สตริง
document_id ข้อความ สตริง
document_str ข้อความ สตริง
คำถาม_id ข้อความ สตริง
คำถาม_str ข้อความ สตริง
test_id ข้อความ สตริง
หัวข้อ_id ข้อความ สตริง
หัวข้อ_ชื่อ ข้อความ สตริง
  • คีย์ภายใต้การดูแล (ดู as_supervised doc ): None

  • รูปภาพ ( tfds.show_examples ): ไม่รองรับ

  • การอ้างอิง :

@InProceedings{10.1007/978-3-642-40802-1_29,
author="Pe{\~{n} }as, Anselmo
and Hovy, Eduard
and Forner, Pamela
and Rodrigo, {\'A}lvaro
and Sutcliffe, Richard
and Morante, Roser",
editor="Forner, Pamela
and M{\"u}ller, Henning
and Paredes, Roberto
and Rosso, Paolo
and Stein, Benno",
title="QA4MRE 2011-2013: Overview of Question Answering for Machine Reading Evaluation",
booktitle="Information Access Evaluation. Multilinguality, Multimodality, and Visualization",
year="2013",
publisher="Springer Berlin Heidelberg",
address="Berlin, Heidelberg",
pages="303--320",
abstract="This paper describes the methodology for testing the performance of Machine Reading systems through Question Answering and Reading Comprehension Tests. This was the attempt of the QA4MRE challenge which was run as a Lab at CLEF 2011--2013. The traditional QA task was replaced by a new Machine Reading task, whose intention was to ask questions that required a deep knowledge of individual short texts and in which systems were required to choose one answer, by analysing the corresponding test document in conjunction with background text collections provided by the organization. Four different tasks have been organized during these years: Main Task, Processing Modality and Negation for Machine Reading, Machine Reading of Biomedical Texts about Alzheimer's disease, and Entrance Exams. This paper describes their motivation, their goals, their methodology for preparing the data sets, their background collections, their metrics used for the evaluation, and the lessons learned along these three years.",
isbn="978-3-642-40802-1"
}

qa4mre/2011.main.DE (การกำหนดค่าเริ่มต้น)

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา DE ในปี 2011

  • ขนาดการดาวน์โหลด : 217.08 KiB

  • ขนาดชุดข้อมูล : 1.69 MiB

  • แยก :

แยก ตัวอย่าง
'train' 120

qa4mre/2011.main.EN

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา EN ในปี 2011

  • ขนาดการดาวน์โหลด : 197.74 KiB

  • ขนาดชุดข้อมูล : 1.52 MiB

  • แยก :

แยก ตัวอย่าง
'train' 120

qa4mre/2011.main.ES

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา ES ในปี 2011

  • ขนาดการดาวน์โหลด : 212.52 KiB

  • ขนาดชุดข้อมูล : 1.64 MiB

  • แยก :

แยก ตัวอย่าง
'train' 120

qa4mre/2011.main.IT

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษาไอทีในปี 2554

  • ขนาดการดาวน์โหลด : 209.73 KiB

  • ขนาดชุดข้อมูล : 1.61 MiB

  • แยก :

แยก ตัวอย่าง
'train' 120

qa4mre/2011.main.RO

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา RO ในปี 2011

  • ขนาดการดาวน์โหลด : 216.32 KiB

  • ขนาดชุดข้อมูล : 1.68 MiB

  • แยก :

แยก ตัวอย่าง
'train' 120

qa4mre/2012.main.AR

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา AR ในปี 2012

  • ขนาดการดาวน์โหลด : 347.83 KiB

  • ขนาดชุดข้อมูล : 2.62 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.BG

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา BG ในปี 2012

  • ขนาดการดาวน์โหลด : 434.63 KiB

  • ขนาดชุดข้อมูล : 3.33 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.DE

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา DE ในปี 2012

  • ขนาดการดาวน์โหลด : 275.00 KiB

  • ขนาดชุดข้อมูล : 2.02 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.EN

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา EN ในปี 2012

  • ขนาดการดาวน์โหลด : 237.76 KiB

  • ขนาดชุดข้อมูล : 1.71 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.ES

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา ES ในปี 2012

  • ขนาดการดาวน์โหลด : 271.92 KiB

  • ขนาดชุดข้อมูล : 1.99 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.IT

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา IT ในปี 2012

  • ขนาดการดาวน์โหลด : 273.49 KiB

  • ขนาดชุดข้อมูล : 2.01 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.main.RO

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา RO ในปี 2012

  • ขนาดการดาวน์โหลด : 272.99 KiB

  • ขนาดชุดข้อมูล : 2.01 MiB

  • แยก :

แยก ตัวอย่าง
'train' 160

qa4mre/2012.alzheimers.EN

  • คำอธิบาย การกำหนดค่า: การกำหนดค่านี้รวมถึงแทร็กอัลไซเมอร์สำหรับภาษา EN ในปี 2012

  • ขนาดการดาวน์โหลด : 173.19 KiB

  • ขนาดชุดข้อมูล : 1.57 MiB

  • แยก :

แยก ตัวอย่าง
'train' 40

qa4mre/2013.main.AR

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา AR ในปี 2013

  • ขนาดการดาวน์โหลด : 369.44 KiB

  • ขนาดชุดข้อมูล : 4.04 MiB

  • แยก :

แยก ตัวอย่าง
'train' 284

qa4mre/2013.main.BG

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา BG ในปี 2013

  • ขนาดการดาวน์โหลด : 452.74 KiB

  • ขนาดชุดข้อมูล : 5.21 MiB

  • แยก :

แยก ตัวอย่าง
'train' 284

qa4mre/2013.main.EN

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา EN ในปี 2013

  • ขนาดการดาวน์โหลด : 268.52 KiB

  • ขนาดชุดข้อมูล : 2.81 MiB

  • แยก :

แยก ตัวอย่าง
'train' 284

qa4mre/2013.main.ES

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา ES ในปี 2013

  • ขนาดการดาวน์โหลด : 307.78 KiB

  • ขนาดชุดข้อมูล : 3.35 MiB

  • แยก :

แยก ตัวอย่าง
'train' 284

qa4mre/2013.main.RO

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้มีแทร็กหลักสำหรับภาษา RO ในปี 2013

  • ขนาดการดาวน์โหลด : 306.16 KiB

  • ขนาดชุดข้อมูล : 3.26 MiB

  • แยก :

แยก ตัวอย่าง
'train' 284

qa4mre/2013.alzheimers.EN

  • คำอธิบาย การกำหนดค่า: การกำหนดค่านี้รวมถึงแทร็กอัลไซเมอร์สำหรับภาษา EN ในปี 2013

  • ขนาดการดาวน์โหลด : 267.98 KiB

  • ขนาดชุดข้อมูล : 2.50 MiB

  • แยก :

แยก ตัวอย่าง
'train' 40

qa4mre/2013.entrance_exam.EN

  • คำอธิบาย การกำหนดค่า : การกำหนดค่านี้รวมแทร็ก entrance_exam สำหรับภาษา EN ในปี 2013

  • ขนาดการดาวน์โหลด : 53.32 KiB

  • ขนาดชุดข้อมูล : 186.01 KiB

  • แยก :

แยก ตัวอย่าง
'train' 46