पिका

  • विवरण :

फिजिकल आईक्यूए: फिजिकल इंटरेक्शन क्यूए, भोले भौतिकी तर्क के लिए एक नया कॉमनसेंस क्यूए बेंचमार्क है जो इस बात पर ध्यान केंद्रित करता है कि हम रोजमर्रा की स्थितियों में रोजमर्रा की वस्तुओं के साथ कैसे बातचीत करते हैं। यह डेटासेट वस्तुओं के खर्च पर ध्यान केंद्रित करता है, यानी, प्रत्येक भौतिक वस्तु किन क्रियाओं को प्रदान करती है (उदाहरण के लिए, दरवाजे के रूप में जूते का उपयोग करना संभव है), और वस्तुओं का एक समूह कौन सी भौतिक बातचीत करता है (उदाहरण के लिए, एक सेब रखना संभव है एक किताब के ऊपर, लेकिन दूसरी तरफ नहीं)। डेटासेट को वस्तुओं के प्रोटोटाइपिक उपयोग (जैसे, चलने के लिए जूते का उपयोग किया जाता है) और गैर-प्रोटोटाइपिक लेकिन व्यावहारिक रूप से वस्तुओं के व्यावहारिक उपयोग (जैसे, जूते को दरवाजे के रूप में इस्तेमाल किया जा सकता है) दोनों के बारे में तर्क की आवश्यकता होती है। डेटासेट में 20,000 क्यूए जोड़े शामिल हैं जो या तो बहुविकल्पीय या सही/गलत प्रश्न हैं।

  • होमपेज : https://leaderboard.allenai.org/ Physicaliqa/submissions/get-started

  • स्रोत कोड : tfds.text.PIQA

  • संस्करण :

    • 1.0.0 (डिफ़ॉल्ट): कोई रिलीज नोट नहीं।
  • डाउनलोड आकार : 1.74 MiB

  • डेटासेट का आकार : 5.92 MiB

  • ऑटो-कैश्ड ( दस्तावेज़ीकरण ): हाँ

  • विभाजन :

विभाजित करना उदाहरण
'train' 16,113
'validation' 1,838
  • विशेषताएं :
FeaturesDict({
    'goal': Text(shape=(), dtype=tf.string),
    'id': Text(shape=(), dtype=tf.string),
    'label': ClassLabel(shape=(), dtype=tf.int64, num_classes=2),
    'sol1': Text(shape=(), dtype=tf.string),
    'sol2': Text(shape=(), dtype=tf.string),
})
  • उद्धरण :
@inproceedings{Bisk2020,
  author = {Yonatan Bisk and Rowan Zellers and
            Ronan Le Bras and Jianfeng Gao
            and Yejin Choi},
  title = {PIQA: Reasoning about Physical Commonsense in
           Natural Language},
  booktitle = {Thirty-Fourth AAAI Conference on
               Artificial Intelligence},
  year = {2020},
}