cfq

  • คำอธิบาย :

ชุดข้อมูล CFQ (และแยกส่วน) สำหรับการวัดลักษณะทั่วไปขององค์ประกอบ

ดู https://arxiv.org/abs/1912.09713.pdf สำหรับพื้นหลัง

หมายเหตุเกี่ยวกับชุดการตรวจสอบความถูกต้อง: เนื่องจากมีการกระจายแบบเดียวกับชุดการทดสอบ และเราสนใจที่จะวัดองค์ประกอบทั่วไปของ แบบจำลอง ในส่วนที่เกี่ยวกับการกระจายการทดสอบ ที่ไม่รู้จัก เราแนะนำว่าควรทำการปรับแต่งใดๆ กับชุดย่อยของรถไฟ ตั้งค่าเท่านั้น (ดูหัวข้อ 5.1 ของกระดาษ)

ตัวอย่างการใช้งาน:

data = tfds.load('cfq/mcd1')
FeaturesDict({
    'query': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})
  • เอกสารคุณสมบัติ :
ลักษณะเฉพาะ ระดับ รูปร่าง Dประเภท คำอธิบาย
คุณสมบัติDict
สอบถาม ข้อความ สตริง
คำถาม ข้อความ สตริง
  • คีย์ภายใต้การดูแล (ดู as_supervised doc ): ('question', 'query')

  • รูปภาพ ( tfds.show_examples ): ไม่รองรับ

  • การอ้างอิง :

@inproceedings{Keysers2020,
  title={Measuring Compositional Generalization: A Comprehensive Method on
         Realistic Data},
  author={Daniel Keysers and Nathanael Sch"{a}rli and Nathan Scales and
          Hylke Buisman and Daniel Furrer and Sergii Kashubin and
          Nikola Momchev and Danila Sinopalnikov and Lukasz Stafiniak and
          Tibor Tihon and Dmitry Tsarkov and Xiao Wang and Marc van Zee and
          Olivier Bousquet},
  booktitle={ICLR},
  year={2020},
  url={https://arxiv.org/abs/1912.09713.pdf},
}

cfq/mcd1 (การกำหนดค่าเริ่มต้น)

  • ขนาดชุดข้อมูล : 49.75 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/mcd2

  • ขนาดชุดข้อมูล : 51.39 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/mcd3

  • ขนาดชุดข้อมูล : 50.22 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/question_complexity_split

  • ขนาดชุดข้อมูล : 52.81 MiB

  • แยก :

แยก ตัวอย่าง
'test' 10,340
'train' 98,999
'validation' 10,339

cfq/question_pattern_split

  • ขนาดชุดข้อมูล : 52.81 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,909
'train' 95,654
'validation' 12,115

cfq/query_complexity_split

  • ขนาดชุดข้อมูล : 52.81 MiB

  • แยก :

แยก ตัวอย่าง
'test' 9,512
'train' 100,654
'validation' 9,512

cfq/query_pattern_split

  • ขนาดชุดข้อมูล : 52.81 MiB

  • แยก :

แยก ตัวอย่าง
'test' 12,589
'train' 94,600
'validation' 12,489

cfq/random_split

  • ขนาดชุดข้อมูล : 52.81 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,967
'train' 95,744
'validation' 11,967

cfq/cd0_r1

  • ขนาดชุดข้อมูล : 49.72 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r2

  • ขนาดชุดข้อมูล : 49.45 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r3

  • ขนาดชุดข้อมูล : 49.76 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r4

  • ขนาดชุดข้อมูล : 50.04 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r5

  • ขนาดชุดข้อมูล : 49.36 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r6

  • ขนาดชุดข้อมูล : 49.36 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r7

  • ขนาดชุดข้อมูล : 49.93 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r8

  • ขนาดชุดข้อมูล : 48.58 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r9

  • ขนาดชุดข้อมูล : 49.23 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r1

  • ขนาดชุดข้อมูล : 51.54 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r2

  • ขนาดชุดข้อมูล : 48.18 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r3

  • ขนาดชุดข้อมูล : 49.23 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r4

  • ขนาดชุดข้อมูล : 49.76 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r5

  • ขนาดชุดข้อมูล : 49.10 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r6

  • ขนาดชุดข้อมูล : 49.10 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r7

  • ขนาดชุดข้อมูล : 48.02 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r8

  • ขนาดชุดข้อมูล : 48.13 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r9

  • ขนาดชุดข้อมูล : 48.44 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r1

  • ขนาดชุดข้อมูล : 50.90 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r2

  • ขนาดชุดข้อมูล : 49.12 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r3

  • ขนาดชุดข้อมูล : 50.68 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r4

  • ขนาดชุดข้อมูล : 52.61 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r5

  • ขนาดชุดข้อมูล : 50.63 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r6

  • ขนาดชุดข้อมูล : 50.63 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r7

  • ขนาดชุดข้อมูล : 52.39 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r8

  • ขนาดชุดข้อมูล : 50.53 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r9

  • ขนาดชุดข้อมูล : 50.64 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r1

  • ขนาดชุดข้อมูล : 52.08 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r2

  • ขนาดชุดข้อมูล : 52.11 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r3

  • ขนาดชุดข้อมูล : 51.25 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r4

  • ขนาดชุดข้อมูล : 49.94 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r5

  • ขนาดชุดข้อมูล : 49.71 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r6

  • ขนาดชุดข้อมูล : 49.71 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r7

  • ขนาดชุดข้อมูล : 50.86 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r8

  • ขนาดชุดข้อมูล : 49.43 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r9

  • ขนาดชุดข้อมูล : 50.32 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r1

  • ขนาดชุดข้อมูล : 48.52 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r2

  • ขนาดชุดข้อมูล : 47.40 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r3

  • ขนาดชุดข้อมูล : 49.18 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r4

  • ขนาดชุดข้อมูล : 47.86 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r5

  • ขนาดชุดข้อมูล : 49.01 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r6

  • ขนาดชุดข้อมูล : 49.01 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r7

  • ขนาดชุดข้อมูล : 51.70 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r8

  • ขนาดชุดข้อมูล : 50.94 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r9

  • ขนาดชุดข้อมูล : 51.98 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r1

  • ขนาดชุดข้อมูล : 51.00 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r2

  • ขนาดชุดข้อมูล : 49.91 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r3

  • ขนาดชุดข้อมูล : 51.26 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r4

  • ขนาดชุดข้อมูล : 51.27 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r5

  • ขนาดชุดข้อมูล : 51.87 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r6

  • ขนาดชุดข้อมูล : 51.87 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r7

  • ขนาดชุดข้อมูล : 48.52 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r8

  • ขนาดชุดข้อมูล : 48.62 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r9

  • ขนาดชุดข้อมูล : 48.48 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r1

  • ขนาดชุดข้อมูล : 49.32 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r2

  • ขนาดชุดข้อมูล : 49.36 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r3

  • ขนาดชุดข้อมูล : 49.85 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r4

  • ขนาดชุดข้อมูล : 50.07 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r5

  • ขนาดชุดข้อมูล : 49.86 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r6

  • ขนาดชุดข้อมูล : 49.86 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r7

  • ขนาดชุดข้อมูล : 49.42 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r8

  • ขนาดชุดข้อมูล : 48.52 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r9

  • ขนาดชุดข้อมูล : 49.54 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r1

  • ขนาดชุดข้อมูล : 49.75 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r2

  • ขนาดชุดข้อมูล : 49.07 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r3

  • ขนาดชุดข้อมูล : 50.22 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r4

  • ขนาดชุดข้อมูล : 49.12 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r5

  • ขนาดชุดข้อมูล : 48.80 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r6

  • ขนาดชุดข้อมูล : 48.80 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r7

  • ขนาดชุดข้อมูล : 50.69 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r8

  • ขนาดชุดข้อมูล : 51.39 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r9

  • ขนาดชุดข้อมูล : 49.94 MiB

  • แยก :

แยก ตัวอย่าง
'test' 11,968
'train' 95,743
'validation' 11,968