参考文献:
コーパス
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:scifact/corpus')
- 説明：
SciFact, a dataset of 1.4K expert-written scientific claims paired with evidence-containing abstracts, and annotated with labels and rationales.
- ライセンス: 既知のライセンスはありません
- バージョン: 1.0.0
- 分割:
| スプリット | 例 |
|---|---|
'train' | 5183 |
- 特徴：
{
"doc_id": {
"dtype": "int32",
"id": null,
"_type": "Value"
},
"title": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"abstract": {
"feature": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"structured": {
"dtype": "bool",
"id": null,
"_type": "Value"
}
}
主張
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:scifact/claims')
- 説明：
SciFact, a dataset of 1.4K expert-written scientific claims paired with evidence-containing abstracts, and annotated with labels and rationales.
- ライセンス: 既知のライセンスはありません
- バージョン: 1.0.0
- 分割:
| スプリット | 例 |
|---|---|
'test' | 300 |
'train' | 1261 |
'validation' | 450 |
- 特徴：
{
"id": {
"dtype": "int32",
"id": null,
"_type": "Value"
},
"claim": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"evidence_doc_id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"evidence_label": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"evidence_sentences": {
"feature": {
"dtype": "int32",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"cited_doc_ids": {
"feature": {
"dtype": "int32",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}