wikitext_tl39

सन्दर्भ:

विकीटेक्स्ट-टीएल-39

इस डेटासेट को TFDS में लोड करने के लिए निम्नलिखित कमांड का उपयोग करें:

ds = tfds.load('huggingface:wikitext_tl39/wikitext-tl-39')
  • विवरण :
Large scale, unlabeled text dataset with 39 Million tokens in the training set. Inspired by the original WikiText Long Term Dependency dataset (Merity et al., 2016). TL means "Tagalog." Originally published in Cruz & Cheng (2019).
  • लाइसेंस : जीपीएल-3.0
  • संस्करण : 1.0.0
  • विभाजन :
विभाजित करना उदाहरण
'test' 376737
'train' 1766072
'validation' 381763
  • विशेषताएँ :
{
    "text": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    }
}