分隊質問生成

  • 説明:

「テキストからのニューラル質問生成: 予備研究」(Zhou et al, 2017) および「質問することの学習: 読解のためのニューラル質問生成」(Du et al, 2017) で説明されているデータ分割を使用した分隊データセットを使用した質問生成。

@inproceedings{du-etal-2017-learning,
    title = "Learning to Ask: Neural Question Generation for Reading Comprehension",
    author = "Du, Xinya  and Shao, Junru  and Cardie, Claire",
    booktitle = "Proceedings of the 55th Annual Meeting of the Association for Computational Linguistics (Volume 1: Long Papers)",
    month = jul,
    year = "2017",
    address = "Vancouver, Canada",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/P17-1123",
    doi = "10.18653/v1/P17-1123",
    pages = "1342--1352",
}

@inproceedings{rajpurkar-etal-2016-squad,
    title = "{SQ}u{AD}: 100,000+ Questions for Machine Comprehension of Text",
    author = "Rajpurkar, Pranav  and Zhang, Jian  and Lopyrev, Konstantin  and Liang, Percy",
    booktitle = "Proceedings of the 2016 Conference on Empirical Methods in Natural Language Processing",
    month = nov,
    year = "2016",
    address = "Austin, Texas",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/D16-1264",
    doi = "10.18653/v1/D16-1264",
    pages = "2383--2392",
}

分隊質問生成/split_du (デフォルト設定)

  • 構成の説明: パッセージ レベルのコンテキストから独立した質問の生成に回答します (Du et al, 2017)。

  • ダウンロードサイズ: 62.83 MiB

  • データセットのサイズ: 84.67 MiB

  • スプリット:

スプリット例
'test' 11,877
'train' 75,722
'validation' 10,570
  • 機能構造:
FeaturesDict({
    'answer': Text(shape=(), dtype=string),
    'context_passage': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})
  • 機能のドキュメント:
特徴クラス形Dtype説明
特徴辞書
答え文章ストリング
context_passage文章ストリング
質問文章ストリング

分隊質問世代/split_zhou

  • 構成の説明: 文レベルおよびパッセージ レベルのコンテキストからの回答スパン依存の質問生成 (Zhou et al, 2017)。

  • ダウンロードサイズ: 62.52 MiB

  • データセットサイズ: 111.02 MiB

  • スプリット:

スプリット例
'test' 8,964
'train' 86,635
'validation' 8,965
  • 機能構造:
FeaturesDict({
    'answer': Text(shape=(), dtype=string),
    'context_passage': Text(shape=(), dtype=string),
    'context_sentence': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})
  • 機能のドキュメント:
特徴クラス形Dtype説明
特徴辞書
答え文章ストリング
context_passage文章ストリング
context_sentence文章ストリング
質問文章ストリング