wsc273

  • 説明:

WSC273 は、あいまいな代名詞を含む文をシステムが読み取り、その代名詞の指示対象を 2 つの選択肢から選択することをシステムに要求する、常識推論のベンチマークです。これには、Winograd Schema Challenge の最初の 273 の例が含まれています。ウィノグラード スキーマは、1 つまたは 2 つの単語だけが異なる文のペアであり、2 つの文で反対の方法で解決されるあいまいさを含み、その解決には世界の知識と推論を使用する必要があります。スキーマの名前は、テリー ウィノグラードの有名な例に由来しますThe city councilmen refused the demonstrators a permit because they [feared/advocated] violence.'' If the word is they'' presumably refers to the city council; if it is提唱されている場合、「彼ら」はおそらくデモ参加者を指します。

スプリット例
'test' 273
  • 機能構造:
FeaturesDict({
    'idx': int32,
    'label': int32,
    'option1': Text(shape=(), dtype=string),
    'option1_normalized': Text(shape=(), dtype=string),
    'option2': Text(shape=(), dtype=string),
    'option2_normalized': Text(shape=(), dtype=string),
    'pronoun_end': int32,
    'pronoun_start': int32,
    'pronoun_text': Text(shape=(), dtype=string),
    'text': Text(shape=(), dtype=string),
})
  • 機能のドキュメント:
特徴クラス形Dtype説明
特徴辞書
idxテンソルint32
ラベルテンソルint32
オプション1文章ストリング
option1_normalized文章ストリング
オプション2文章ストリング
option2_normalized文章ストリング
代名詞の終わりテンソルint32
pronoun_startテンソルint32
代名詞テキスト文章ストリング
文章文章ストリング
  • 引用：
@inproceedings{levesque2012winograd,
  title={The winograd schema challenge},
  author={Levesque, Hector and Davis, Ernest and Morgenstern, Leora},
  booktitle={Thirteenth International Conference on the Principles of Knowledge Representation and Reasoning},
  year={2012},
  organization={Citeseer}
}