salient_span_wikipedia

• 説明:

顕著な範囲にラベルが付けられたウィキペディアの文章。

• ホームページ: https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia

• ソース コード: tfds.datasets.salient_span_wikipedia.Builder

• バージョン:

  • 1.0.0 (デフォルト): リリース ノートはありません。

• ダウンロードサイズ: サイズUnknown size

• 自動キャッシュ(ドキュメント): いいえ

• 監視されたキー( as_supervised docを参照): None

• 図( tfds.show_examples ): サポートされていません。

• 引用：

@article{guu2020realm,
    title={REALM: Retrieval-Augmented Language Model Pre-Training},
    author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
    year={2020},
    journal = {arXiv e-prints},
    archivePrefix = {arXiv},
    eprint={2002.08909},
}

salient_span_wikipedia/sentences (デフォルト設定)

• 構成の説明: 例は、エンティティを含む個々の文です。

• データセットサイズ: 20.57 GiB

• スプリット:

スプリット	例
'train'	82,291,706

• 機能構造:

FeaturesDict({
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• 機能のドキュメント:

特徴	クラス	形	Dtype	説明
	特徴辞書
スパン	順序
スパン/制限	テンソル		int32
スパン/開始	テンソル		int32
スパン/タイプ	テンソル		ストリング
文章	文章		ストリング
題名	文章		ストリング

• 例( tfds.as_dataframe ):

salient_span_wikipedia/ドキュメント

• 構成の説明: 完全なドキュメントの例。

• データセットサイズ: 16.52 GiB

• スプリット:

スプリット	例
'train'	13,353,718

• 機能構造:

FeaturesDict({
    'sentences': Sequence({
        'limit': int32,
        'start': int32,
    }),
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• 機能のドキュメント:

特徴	クラス	形	Dtype	説明
	特徴辞書
文章	順序
文/制限	テンソル		int32
文/開始	テンソル		int32
スパン	順序
スパン/制限	テンソル		int32
スパン/開始	テンソル		int32
スパン/タイプ	テンソル		ストリング
文章	文章		ストリング
題名	文章		ストリング

• 例( tfds.as_dataframe ):