Riferimenti:
el-en
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/el-en')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 9402646 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"el",
"en"
],
"id": null,
"_type": "Translation"
}
}
en-ah
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-ha')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 19694 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"ha"
],
"id": null,
"_type": "Translation"
}
}
it-ig
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-ig')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 28829 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"ig"
],
"id": null,
"_type": "Translation"
}
}
en-km
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-km')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 65113 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"km"
],
"id": null,
"_type": "Translation"
}
}
en-so
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-so')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 14879 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"so"
],
"id": null,
"_type": "Translation"
}
}
de-pl
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/de-pl')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 916624 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"de",
"pl"
],
"id": null,
"_type": "Translation"
}
}
fr-nl
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/fr-nl')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 2687619 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"fr",
"nl"
],
"id": null,
"_type": "Translation"
}
}
it-sw
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-sw')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 132517 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"sw"
],
"id": null,
"_type": "Translation"
}
}
en-tl
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/en-tl')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 248684 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"en",
"tl"
],
"id": null,
"_type": "Translation"
}
}
es-gl
Utilizzare il comando seguente per caricare questo set di dati in TFDS:
ds = tfds.load('huggingface:opus_paracrawl/es-gl')
- Descrizione :
Parallel corpora from Web Crawls collected in the ParaCrawl project
40 languages, 41 bitexts
total number of files: 20,995
total number of tokens: 21.40G
total number of sentence fragments: 1.12G
- Licenza : nessuna licenza conosciuta
- Versione : 1.0.0
- Divide :
| Diviso | Esempi |
|---|---|
'train' | 1222862 |
- Caratteristiche :
{
"id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"translation": {
"languages": [
"es",
"gl"
],
"id": null,
"_type": "Translation"
}
}