wikitext_tl39

Referências:

wikitext-tl-39

Use o seguinte comando para carregar este conjunto de dados no TFDS:

ds = tfds.load('huggingface:wikitext_tl39/wikitext-tl-39')
  • Descrição : 
Large scale, unlabeled text dataset with 39 Million tokens in the training set. Inspired by the original WikiText Long Term Dependency dataset (Merity et al., 2016). TL means "Tagalog." Originally published in Cruz & Cheng (2019).
  • Licença : GPL-3.0
  • Versão : 1.0.0
  • Divisões :
Dividir Exemplos
'test' 376737
'train' 1766072
'validation' 381763
  • Características : 
{
    "text": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    }
}