Tài liệu tham khảo:
Sử dụng lệnh sau để tải tập dữ liệu này trong TFDS:
ds = tfds.load('huggingface:kor_hate')
- Sự miêu tả :
Human-annotated Korean corpus collected from a popular domestic entertainment news aggregation platform
for toxic speech detection. Comments are annotated for gender bias, social bias and hate speech.
- Giấy phép : Creative Commons
- Phiên bản : 1.1.0
- Chia tách :
Tách ra | Ví dụ |
---|---|
'test' | 471 |
'train' | 7896 |
- Đặc trưng :
{
"comments": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"contain_gender_bias": {
"num_classes": 2,
"names": [
"False",
"True"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"bias": {
"num_classes": 3,
"names": [
"none",
"gender",
"others"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"hate": {
"num_classes": 3,
"names": [
"hate",
"offensive",
"none"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}