バイネット

参照：

• コード
• Huggingface

en_to_ku

次のコマンドを使用して、このデータセットをTFDSにロードします。

ds = tfds.load('huggingface:bianet/en_to_ku')

• 説明：

A parallel news corpus in Turkish, Kurdish and English.
Bianet collects 3,214 Turkish articles with their sentence-aligned Kurdish or English translations from the Bianet online newspaper.
3 languages, 3 bitexts
total number of files: 6
total number of tokens: 2.25M
total number of sentence fragments: 0.14M

• ライセンス：既知のライセンスはありません
• バージョン：1.0.0
• 分割：

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "en",
            "ku"
        ],
        "id": null,
        "_type": "Translation"
    }
}

en_to_tr

次のコマンドを使用して、このデータセットをTFDSにロードします。

ds = tfds.load('huggingface:bianet/en_to_tr')

• 説明：

A parallel news corpus in Turkish, Kurdish and English.
Bianet collects 3,214 Turkish articles with their sentence-aligned Kurdish or English translations from the Bianet online newspaper.
3 languages, 3 bitexts
total number of files: 6
total number of tokens: 2.25M
total number of sentence fragments: 0.14M

• ライセンス：既知のライセンスはありません
• バージョン：1.0.0
• 分割：

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "en",
            "tr"
        ],
        "id": null,
        "_type": "Translation"
    }
}

ku_to_tr

次のコマンドを使用して、このデータセットをTFDSにロードします。

ds = tfds.load('huggingface:bianet/ku_to_tr')

• 説明：

A parallel news corpus in Turkish, Kurdish and English.
Bianet collects 3,214 Turkish articles with their sentence-aligned Kurdish or English translations from the Bianet online newspaper.
3 languages, 3 bitexts
total number of files: 6
total number of tokens: 2.25M
total number of sentence fragments: 0.14M

• ライセンス：既知のライセンスはありません
• バージョン：1.0.0
• 分割：

• 特徴：

{
    "id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "translation": {
        "languages": [
            "ku",
            "tr"
        ],
        "id": null,
        "_type": "Translation"
    }
}