menyo20k_mt

อ้างอิง:

Menyo20k_mt

ใช้คำสั่งต่อไปนี้เพื่อโหลดชุดข้อมูลนี้ใน TFDS:

ds = tfds.load('huggingface:menyo20k_mt/menyo20k_mt')
  • คำอธิบาย :
MENYO-20k is a multi-domain parallel dataset with texts obtained from news articles, ted talks, movie transcripts, radio transcripts, science and technology texts, and other short articles curated from the web and professional translators. The dataset has 20,100 parallel sentences split into 10,070 training sentences, 3,397 development sentences, and 6,633 test sentences (3,419 multi-domain, 1,714 news domain, and 1,500 ted talks speech transcript domain). The development and test sets are available upon request.
  • การอนุญาต : สำหรับการใช้งานที่ไม่ใช่เชิงพาณิชย์ เนื่องจากแหล่งข้อมูลบางส่วน เช่น Ted talks และ JW news ต้องได้รับอนุญาตสำหรับการใช้งานเชิงพาณิชย์
  • เวอร์ชัน : 1.0.0
  • แยก :
แยก ตัวอย่าง
'train' 10070
  • คุณสมบัติ :
{
    "translation": {
        "languages": [
            "en",
            "yo"
        ],
        "id": null,
        "_type": "Translation"
    }
}