参考文献:
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:hope_edi/english')
- 説明：
A Hope Speech dataset for Equality, Diversity and Inclusion (HopeEDI) containing user-generated comments from the social media platform YouTube with 28,451, 20,198 and 10,705 comments in English, Tamil and Malayalam, respectively, manually labelled as containing hope speech or not.
- ライセンス: クリエイティブ コモンズ 表示 4.0 国際ライセンス
- バージョン: 1.0.0
- 分割:
| スプリット | 例 |
|---|---|
'train' | 22762 |
'validation' | 2843 |
- 特徴：
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 3,
"names": [
"Hope_speech",
"Non_hope_speech",
"not-English"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}
タミル語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:hope_edi/tamil')
- 説明：
A Hope Speech dataset for Equality, Diversity and Inclusion (HopeEDI) containing user-generated comments from the social media platform YouTube with 28,451, 20,198 and 10,705 comments in English, Tamil and Malayalam, respectively, manually labelled as containing hope speech or not.
- ライセンス: クリエイティブ コモンズ 表示 4.0 国際ライセンス
- バージョン: 1.0.0
- 分割:
| スプリット | 例 |
|---|---|
'train' | 16160 |
'validation' | 2018年 |
- 特徴：
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 3,
"names": [
"Hope_speech",
"Non_hope_speech",
"not-Tamil"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}
マラヤーラム語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:hope_edi/malayalam')
- 説明：
A Hope Speech dataset for Equality, Diversity and Inclusion (HopeEDI) containing user-generated comments from the social media platform YouTube with 28,451, 20,198 and 10,705 comments in English, Tamil and Malayalam, respectively, manually labelled as containing hope speech or not.
- ライセンス: クリエイティブ コモンズ 表示 4.0 国際ライセンス
- バージョン: 1.0.0
- 分割:
| スプリット | 例 |
|---|---|
'train' | 8564 |
'validation' | 1070 |
- 特徴：
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 3,
"names": [
"Hope_speech",
"Non_hope_speech",
"not-malayalam"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}