wikitext_tl39

Les références:

wikitext-tl-39

Utilisez la commande suivante pour charger cet ensemble de données dans TFDS :

ds = tfds.load('huggingface:wikitext_tl39/wikitext-tl-39')
  • Description :
Large scale, unlabeled text dataset with 39 Million tokens in the training set. Inspired by the original WikiText Long Term Dependency dataset (Merity et al., 2016). TL means "Tagalog." Originally published in Cruz & Cheng (2019).
  • Licence : GPL-3.0
  • Version : 1.0.0
  • Divisions :
Diviser Exemples
'test' 376737
'train' 1766072
'validation' 381763
  • Caractéristiques :
{
    "text": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    }
}