kde4

参考文献:

• コード
• ハグフェイス

フィ-ンル

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:kde4/fi-nl')

• 説明：

A parallel corpus of KDE4 localization files (v.2).

92 languages, 4,099 bitexts
total number of files: 75,535
total number of tokens: 60.75M
total number of sentence fragments: 8.89M

• ライセンス: 不明なライセンス
• バージョン: 2.0.0
• 分割:

スプリット	例
'train'	101593

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "fi",
            "nl"
        ],
        "id": null,
        "_type": "Translation"
    }
}

それろ

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:kde4/it-ro')

• 説明：

A parallel corpus of KDE4 localization files (v.2).

92 languages, 4,099 bitexts
total number of files: 75,535
total number of tokens: 60.75M
total number of sentence fragments: 8.89M

• ライセンス: 不明なライセンス
• バージョン: 2.0.0
• 分割:

スプリット	例
'train'	109003

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "it",
            "ro"
        ],
        "id": null,
        "_type": "Translation"
    }
}

nl-sv

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:kde4/nl-sv')

• 説明：

A parallel corpus of KDE4 localization files (v.2).

92 languages, 4,099 bitexts
total number of files: 75,535
total number of tokens: 60.75M
total number of sentence fragments: 8.89M

• ライセンス: 不明なライセンス
• バージョン: 2.0.0
• 分割:

スプリット	例
'train'	188454

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "nl",
            "sv"
        ],
        "id": null,
        "_type": "Translation"
    }
}

エンイット

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:kde4/en-it')

• 説明：

A parallel corpus of KDE4 localization files (v.2).

92 languages, 4,099 bitexts
total number of files: 75,535
total number of tokens: 60.75M
total number of sentence fragments: 8.89M

• ライセンス: 不明なライセンス
• バージョン: 2.0.0
• 分割:

スプリット	例
'train'	220566

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "en",
            "it"
        ],
        "id": null,
        "_type": "Translation"
    }
}

フランス

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:kde4/en-fr')

• 説明：

A parallel corpus of KDE4 localization files (v.2).

92 languages, 4,099 bitexts
total number of files: 75,535
total number of tokens: 60.75M
total number of sentence fragments: 8.89M

• ライセンス: 不明なライセンス
• バージョン: 2.0.0
• 分割:

スプリット	例
'train'	210173

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "en",
            "fr"
        ],
        "id": null,
        "_type": "Translation"
    }
}