ピカ

  • 説明:

Physical IQa: Physical Interaction QA は、日常的な状況で日常的なオブジェクトとどのように相互作用するかに焦点を当てた単純な物理推論の新しい常識的な QA ベンチマークです。このデータセットは、オブジェクトのアフォーダンス、つまり、各物理オブジェクトが提供するアクション (例: 靴をドアストッパーとして使用できる) と、オブジェクトのグループが提供する物理的相互作用 (例: リンゴを置くことができる) に焦点を当てています。本の上に載せますが、その逆ではありません)。データセットでは、オブジェクトの典型的な使用法 (例: 靴は歩行に使用される) と、非典型的ではあるが実用的に妥当なオブジェクトの使用法 (例: 靴はドアストッパーとして使用できる) の両方についての推論が必要です。データセットには、多肢選択式または正誤問題のいずれかである 20,000 の QA ペアが含まれています。

スプリット例
'train' 16,113
'validation' 1,838
  • 機能構造:
FeaturesDict({
    'goal': Text(shape=(), dtype=string),
    'id': Text(shape=(), dtype=string),
    'label': ClassLabel(shape=(), dtype=int64, num_classes=2),
    'sol1': Text(shape=(), dtype=string),
    'sol2': Text(shape=(), dtype=string),
})
  • 機能のドキュメント:
特徴クラス形Dtype説明
特徴辞書
ゴール文章ストリング
ID文章ストリング
ラベルクラスラベルint64
ソル1文章ストリング
sol2文章ストリング
  • 引用：
@inproceedings{Bisk2020,
  author = {Yonatan Bisk and Rowan Zellers and
            Ronan Le Bras and Jianfeng Gao
            and Yejin Choi},
  title = {PIQA: Reasoning about Physical Commonsense in
           Natural Language},
  booktitle = {Thirty-Fourth AAAI Conference on
               Artificial Intelligence},
  year = {2020},
}