อ้างอิง:
ทมิฬ
ใช้คำสั่งต่อไปนี้เพื่อโหลดชุดข้อมูลนี้ใน TFDS:
ds = tfds.load('huggingface:offenseval_dravidian/tamil')
- คำอธิบาย :
Offensive language identification in dravidian lanaguages dataset. The goal of this task is to identify offensive language content of the code-mixed dataset of comments/posts in Dravidian Languages ( (Tamil-English, Malayalam-English, and Kannada-English)) collected from social media.
- ใบอนุญาต : Creative Commons Attribution 4.0 ใบอนุญาตระหว่างประเทศ
- เวอร์ชัน : 1.0.0
- แยก :
แยก | ตัวอย่าง |
---|---|
'train' | 35139 |
'validation' | 4388 |
- คุณสมบัติ :
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 6,
"names": [
"Not_offensive",
"Offensive_Untargetede",
"Offensive_Targeted_Insult_Individual",
"Offensive_Targeted_Insult_Group",
"Offensive_Targeted_Insult_Other",
"not-Tamil"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}
มาลายาลัม
ใช้คำสั่งต่อไปนี้เพื่อโหลดชุดข้อมูลนี้ใน TFDS:
ds = tfds.load('huggingface:offenseval_dravidian/malayalam')
- คำอธิบาย :
Offensive language identification in dravidian lanaguages dataset. The goal of this task is to identify offensive language content of the code-mixed dataset of comments/posts in Dravidian Languages ( (Tamil-English, Malayalam-English, and Kannada-English)) collected from social media.
- ใบอนุญาต : Creative Commons Attribution 4.0 ใบอนุญาตระหว่างประเทศ
- เวอร์ชัน : 1.0.0
- แยก :
แยก | ตัวอย่าง |
---|---|
'train' | 16010 |
'validation' | 1999 |
- คุณสมบัติ :
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 6,
"names": [
"Not_offensive",
"Offensive_Untargetede",
"Offensive_Targeted_Insult_Individual",
"Offensive_Targeted_Insult_Group",
"Offensive_Targeted_Insult_Other",
"not-malayalam"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}
กันนาดา
ใช้คำสั่งต่อไปนี้เพื่อโหลดชุดข้อมูลนี้ใน TFDS:
ds = tfds.load('huggingface:offenseval_dravidian/kannada')
- คำอธิบาย :
Offensive language identification in dravidian lanaguages dataset. The goal of this task is to identify offensive language content of the code-mixed dataset of comments/posts in Dravidian Languages ( (Tamil-English, Malayalam-English, and Kannada-English)) collected from social media.
- ใบอนุญาต : Creative Commons Attribution 4.0 ใบอนุญาตระหว่างประเทศ
- เวอร์ชัน : 1.0.0
- แยก :
แยก | ตัวอย่าง |
---|---|
'train' | 6217 |
'validation' | 777 |
- คุณสมบัติ :
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"label": {
"num_classes": 6,
"names": [
"Not_offensive",
"Offensive_Untargetede",
"Offensive_Targeted_Insult_Individual",
"Offensive_Targeted_Insult_Group",
"Offensive_Targeted_Insult_Other",
"not-Kannada"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
}
}