Conozca lo último en aprendizaje automático, IA generativa y más en el Simposio WiML 2023.

Se usó la API de Cloud Translation para traducir esta página.

para_crawl

Referencias:

enbg

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enbg')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1039885

Características :

{
    "translation": {
        "languages": [
            "en",
            "bg"
        ],
        "id": null,
        "_type": "Translation"
    }
}

encs

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/encs')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	2981949

Características :

{
    "translation": {
        "languages": [
            "en",
            "cs"
        ],
        "id": null,
        "_type": "Translation"
    }
}

termina

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enda')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	2414895

Características :

{
    "translation": {
        "languages": [
            "en",
            "da"
        ],
        "id": null,
        "_type": "Translation"
    }
}

fin

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/ende')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	16264448

Características :

{
    "translation": {
        "languages": [
            "en",
            "de"
        ],
        "id": null,
        "_type": "Translation"
    }
}

Enel

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enel')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1985233

Características :

{
    "translation": {
        "languages": [
            "en",
            "el"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enes

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enes')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	21987267

Características :

{
    "translation": {
        "languages": [
            "en",
            "es"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enet

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enet')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	853422

Características :

{
    "translation": {
        "languages": [
            "en",
            "et"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enfi

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enfi')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	2156069

Características :

{
    "translation": {
        "languages": [
            "en",
            "fi"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enfr

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enfr')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	31374161

Características :

{
    "translation": {
        "languages": [
            "en",
            "fr"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enga

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enga')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	357399

Características :

{
    "translation": {
        "languages": [
            "en",
            "ga"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enhr

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enhr')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1002053

Características :

{
    "translation": {
        "languages": [
            "en",
            "hr"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enhu

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enhu')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1901342

Características :

{
    "translation": {
        "languages": [
            "en",
            "hu"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enit

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enit')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	12162239

Características :

{
    "translation": {
        "languages": [
            "en",
            "it"
        ],
        "id": null,
        "_type": "Translation"
    }
}

ent

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enlt')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	844643

Características :

{
    "translation": {
        "languages": [
            "en",
            "lt"
        ],
        "id": null,
        "_type": "Translation"
    }
}

env

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enlv')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	553060

Características :

{
    "translation": {
        "languages": [
            "en",
            "lv"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enemista

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enmt')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	195502

Características :

{
    "translation": {
        "languages": [
            "en",
            "mt"
        ],
        "id": null,
        "_type": "Translation"
    }
}

ennl

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/ennl')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	5659268

Características :

{
    "translation": {
        "languages": [
            "en",
            "nl"
        ],
        "id": null,
        "_type": "Translation"
    }
}

completo

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enpl')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	3503276

Características :

{
    "translation": {
        "languages": [
            "en",
            "pl"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enpt

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enpt')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	8141940

Características :

{
    "translation": {
        "languages": [
            "en",
            "pt"
        ],
        "id": null,
        "_type": "Translation"
    }
}

enro

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/enro')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1952043

Características :

{
    "translation": {
        "languages": [
            "en",
            "ro"
        ],
        "id": null,
        "_type": "Translation"
    }
}

pedir

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/ensk')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	1591831

Características :

{
    "translation": {
        "languages": [
            "en",
            "sk"
        ],
        "id": null,
        "_type": "Translation"
    }
}

ensl

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/ensl')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	660161

Características :

{
    "translation": {
        "languages": [
            "en",
            "sl"
        ],
        "id": null,
        "_type": "Translation"
    }
}

env

Utilice el siguiente comando para cargar este conjunto de datos en TFDS:

ds = tfds.load('huggingface:para_crawl/ensv')

Descripción :

Web-Scale Parallel Corpora for Official European Languages.

Licencia : Sin licencia conocida
Versión : 1.0.0
Divisiones :

Separar	Ejemplos
`'train'`	3476729

Características :

{
    "translation": {
        "languages": [
            "en",
            "sv"
        ],
        "id": null,
        "_type": "Translation"
    }
}