wiki_bio
コレクションでコンテンツを整理
必要に応じて、コンテンツの保存と分類を行います。
WikiBio はウィキペディアの伝記ページを使用して構築されており、最初の段落とトークン化されたインフォボックスが含まれています。データセットは、標準化されたテーブル形式に従います。
スプリット | 例 |
---|
'test' | 72,831 |
'train' | 582,659 |
'validation' | 72,831 |
FeaturesDict({
'input_text': FeaturesDict({
'context': string,
'table': Sequence({
'column_header': string,
'content': string,
'row_number': int16,
}),
}),
'target_text': string,
})
特徴 | クラス | 形 | Dtype | 説明 |
---|
| 特徴辞書 | | | |
入力テキスト | 特徴辞書 | | | |
入力テキスト/コンテキスト | テンソル | | ストリング | |
入力テキスト/テーブル | 順序 | | | |
input_text/table/column_header | テンソル | | ストリング | |
入力テキスト/テーブル/コンテンツ | テンソル | | ストリング | |
入力テキスト/テーブル/行番号 | テンソル | | int16 | |
target_text | テンソル | | ストリング | |
@inproceedings{lebret-etal-2016-neural,
title = "Neural Text Generation from Structured Data with Application to the Biography Domain",
author = "Lebret, R{'e}mi and
Grangier, David and
Auli, Michael",
booktitle = "Proceedings of the 2016 Conference on Empirical Methods in Natural Language Processing",
month = nov,
year = "2016",
address = "Austin, Texas",
publisher = "Association for Computational Linguistics",
url = "https://www.aclweb.org/anthology/D16-1128",
doi = "10.18653/v1/D16-1128",
pages = "1203--1213",
}
特に記載のない限り、このページのコンテンツはクリエイティブ・コモンズの表示 4.0 ライセンスにより使用許諾されます。コードサンプルは Apache 2.0 ライセンスにより使用許諾されます。詳しくは、Google Developers サイトのポリシーをご覧ください。Java は Oracle および関連会社の登録商標です。
最終更新日 2022-12-06 UTC。
[null,null,["最終更新日 2022-12-06 UTC。"],[],[],null,["# wiki_bio\n\n\u003cbr /\u003e\n\n- **Description**:\n\nWikiBio is constructed using Wikipedia biography pages, it contains the first\nparagraph and the infobox tokenized. The dataset follows a standarized table\nformat.\n\n- **Additional Documentation** :\n [Explore on Papers With Code\n north_east](https://paperswithcode.com/dataset/wikibio)\n\n- **Homepage** :\n \u003chttps://github.com/DavidGrangier/wikipedia-biography-dataset\u003e\n\n- **Source code** :\n [`tfds.structured.WikiBio`](https://github.com/tensorflow/datasets/tree/master/tensorflow_datasets/structured/wiki_bio.py)\n\n- **Versions**:\n\n - **`0.1.0`** (default): No release notes.\n- **Download size** : `318.53 MiB`\n\n- **Dataset size** : `795.98 MiB`\n\n- **Auto-cached**\n ([documentation](https://www.tensorflow.org/datasets/performances#auto-caching)):\n No\n\n- **Splits**:\n\n| Split | Examples |\n|----------------|----------|\n| `'test'` | 72,831 |\n| `'train'` | 582,659 |\n| `'validation'` | 72,831 |\n\n- **Feature structure**:\n\n FeaturesDict({\n 'input_text': FeaturesDict({\n 'context': string,\n 'table': Sequence({\n 'column_header': string,\n 'content': string,\n 'row_number': int16,\n }),\n }),\n 'target_text': string,\n })\n\n- **Feature documentation**:\n\n| Feature | Class | Shape | Dtype | Description |\n|--------------------------------|--------------|-------|--------|-------------|\n| | FeaturesDict | | | |\n| input_text | FeaturesDict | | | |\n| input_text/context | Tensor | | string | |\n| input_text/table | Sequence | | | |\n| input_text/table/column_header | Tensor | | string | |\n| input_text/table/content | Tensor | | string | |\n| input_text/table/row_number | Tensor | | int16 | |\n| target_text | Tensor | | string | |\n\n- **Supervised keys** (See\n [`as_supervised` doc](https://www.tensorflow.org/datasets/api_docs/python/tfds/load#args)):\n `('input_text', 'target_text')`\n\n- **Figure**\n ([tfds.show_examples](https://www.tensorflow.org/datasets/api_docs/python/tfds/visualization/show_examples)):\n Not supported.\n\n- **Examples**\n ([tfds.as_dataframe](https://www.tensorflow.org/datasets/api_docs/python/tfds/as_dataframe)):\n\nDisplay examples... \n\n- **Citation**:\n\n @inproceedings{lebret-etal-2016-neural,\n title = \"Neural Text Generation from Structured Data with Application to the Biography Domain\",\n author = \"Lebret, R{'e}mi and\n Grangier, David and\n Auli, Michael\",\n booktitle = \"Proceedings of the 2016 Conference on Empirical Methods in Natural Language Processing\",\n month = nov,\n year = \"2016\",\n address = \"Austin, Texas\",\n publisher = \"Association for Computational Linguistics\",\n url = \"https://www.aclweb.org/anthology/D16-1128\",\n doi = \"10.18653/v1/D16-1128\",\n pages = \"1203--1213\",\n }"]]