Questa pagina è stata tradotta dall'API Cloud Translation.
Switch to English

wmt16_translate

  • Descrizione :

Traduci il set di dati basato sui dati di statmt.org.

Esistono versioni per i diversi anni utilizzando una combinazione di più origini dati. wmt_translate base wmt_translate consente di creare la tua configurazione per scegliere la tua coppia di dati / lingua creando un tfds.translate.wmt.WmtConfig personalizzato.

 config = tfds.translate.wmt.WmtConfig(
    version="0.0.1",
    language_pair=("fr", "de"),
    subsets={
        tfds.Split.TRAIN: ["commoncrawl_frde"],
        tfds.Split.VALIDATION: ["euelections_dev2019"],
    },
)
builder = tfds.builder("wmt_translate", config=config)
 
  • Pagina iniziale : http://www.statmt.org/wmt16/translation-task.html

  • Codice sorgente : tfds.translate.Wmt16Translate

  • Versioni :

    • 1.0.0 (impostazione predefinita): nessuna nota sulla versione.
  • Dimensione del set di dati : Unknown size

  • Istruzioni per il download manuale : questo set di dati richiede di scaricare manualmente i dati di origine in download_config.manual_dir (il valore predefinito è ~/tensorflow_datasets/download/manual/ ):
    Alcune delle configurazioni di wmt qui richiedono un download manuale. Cerca in wmt.py per vedere il percorso esatto (e il nome del file) che deve essere scaricato.

  • Memorizzazione automatica nella cache ( documentazione ): sconosciuto

  • Citazione :

 @InProceedings{bojar-EtAl:2016:WMT1,
  author    = {Bojar, Ond
{r}ej  and  Chatterjee, Rajen  and  Federmann, Christian  and  Graham, Yvette  and  Haddow, Barry  and  Huck, Matthias  and  Jimeno Yepes, Antonio  and  Koehn, Philipp  and  Logacheva, Varvara  and  Monz, Christof  and  Negri, Matteo  and  Neveol, Aurelie  and  Neves, Mariana  and  Popel, Martin  and  Post, Matt  and  Rubino, Raphael  and  Scarton, Carolina  and  Specia, Lucia  and  Turchi, Marco  and  Verspoor, Karin  and  Zampieri, Marcos},
  title     = {Findings of the 2016 Conference on Machine Translation},
  booktitle = {Proceedings of the First Conference on Machine Translation},
  month     = {August},
  year      = {2016},
  address   = {Berlin, Germany},
  publisher = {Association for Computational Linguistics},
  pages     = {131--198},
  url       = {http://www.aclweb.org/anthology/W/W16/W16-2301}
}
 

wmt16_translate / cs-en (configurazione predefinita)

  • Descrizione della configurazione : set di dati dell'attività di traduzione cs-en WMT 2016.

  • Dimensione download : 1.57 GiB

  • Split :

Diviso Esempi
'test' 2.999
'train' 52.335.651
'validation' 2.656
  • Caratteristiche :
 Translation({
    'cs': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})
 

wmt16_translate / de-it

  • Descrizione della configurazione : set di dati dell'attività di traduzione de-en WMT 2016.

  • Dimensione download : 1.57 GiB

  • Split :

Diviso Esempi
'test' 2.999
'train' 4.548.885
'validation' 2.169
  • Caratteristiche :
 Translation({
    'de': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})
 

wmt16_translate / fi-it

  • Descrizione della configurazione : set di dati dell'attività di traduzione fi-en WMT 2016.

  • Dimensione download : 260.51 MiB

  • Split :

Diviso Esempi
'test' 6.000
'train' 2.073.394
'validation' 1.370
  • Caratteristiche :
 Translation({
    'en': Text(shape=(), dtype=tf.string),
    'fi': Text(shape=(), dtype=tf.string),
})
 

wmt16_translate / ro-it

  • Descrizione della configurazione : set di dati dell'attività di traduzione ro-en di WMT 2016.

  • Dimensione download : 273.83 MiB

  • Split :

Diviso Esempi
'test' 1.999
'train' 610.320
'validation' 1.999
  • Caratteristiche :
 Translation({
    'en': Text(shape=(), dtype=tf.string),
    'ro': Text(shape=(), dtype=tf.string),
})
 

wmt16_translate / ru-it

  • Descrizione della configurazione : set di dati dell'attività di traduzione ru-en di WMT 2016.

  • Dimensione del download : 993.38 MiB

  • Split :

Diviso Esempi
'test' 2.998
'train' 2.516.162
'validation' 2.818
  • Caratteristiche :
 Translation({
    'en': Text(shape=(), dtype=tf.string),
    'ru': Text(shape=(), dtype=tf.string),
})
 

wmt16_translate / TR-it

  • Descrizione della configurazione : set di dati dell'attività di traduzione tr-en di WMT 2016.

  • Dimensione download : 59.32 MiB

  • Split :

Diviso Esempi
'test' 3.000
'train' 205.756
'validation' 1.001
  • Caratteristiche :
 Translation({
    'en': Text(shape=(), dtype=tf.string),
    'tr': Text(shape=(), dtype=tf.string),
})