ML Community Day è il 9 novembre! Unisciti a noi per gli aggiornamenti da tensorflow, JAX, e più Per saperne di più

ted_hrlr_translate

  • Descrizione:

Set di dati derivati ​​da trascrizioni di discorsi TED per confrontare coppie linguistiche simili in cui una è una risorsa elevata e l'altra è una risorsa bassa.

@inproceedings{Ye2018WordEmbeddings,
  author  = {Ye, Qi and Devendra, Sachan and Matthieu, Felix and Sarguna, Padmanabhan and Graham, Neubig},
  title   = {When and Why are pre-trained word embeddings useful for Neural Machine Translation},
  booktitle = {HLT-NAACL},
  year    = {2018},
  }

ted_hrlr_translate/az_to_en (configurazione predefinita)

  • Descrizione Config: dataset traduzione da az a en in testo normale.

  • divide:

Diviso Esempi
'test' 903
'train' 5.946
'validation' 671
  • Caratteristiche:
Translation({
    'az': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/aztr_to_en

  • Descrizione Config: dataset traduzione da az_tr a en in testo normale.

  • divide:

Diviso Esempi
'test' 903
'train' 188.396
'validation' 671
  • Caratteristiche:
Translation({
    'az_tr': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/be_to_en

  • Descrizione Config: dataset traduzione da BE a en in testo normale.

  • divide:

Diviso Esempi
'test' 664
'train' 4.509
'validation' 248
  • Caratteristiche:
Translation({
    'be': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/beru_to_en

  • Descrizione Config: dataset traduzione da be_ru a en in testo normale.

  • divide:

Diviso Esempi
'test' 664
'train' 212.614
'validation' 248
  • Caratteristiche:
Translation({
    'be_ru': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/es_to_pt

  • Descrizione Config: dataset traduzione da en to pt in testo normale.

  • divide:

Diviso Esempi
'test' 1.763
'train' 44.938
'validation' 1.016
  • Caratteristiche:
Translation({
    'es': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/fr_to_pt

  • Descrizione Config: dataset traduzione da fr pt al testo in chiaro.

  • divide:

Diviso Esempi
'test' 1.494
'train' 43.873
'validation' 1,131
  • Caratteristiche:
Translation({
    'fr': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/gl_to_en

  • Descrizione Config: dataset traduzione da gl a en in testo normale.

  • divide:

Diviso Esempi
'test' 1,007
'train' 10.017
'validation' 682
  • Caratteristiche:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'gl': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/glpt_to_en

  • Descrizione Config: dataset traduzione da gl_pt a en in testo normale.

  • divide:

Diviso Esempi
'test' 1,007
'train' 61.802
'validation' 682
  • Caratteristiche:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'gl_pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/he_to_pt

  • Descrizione Config: dataset traduzione da lui a pt in testo normale.

  • divide:

Diviso Esempi
'test' 1,623
'train' 48,511
'validation' 1.145
  • Caratteristiche:
Translation({
    'he': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/it_to_pt

  • Descrizione Config: dataset traduzione da esso per pt in testo normale.

  • divide:

Diviso Esempi
'test' 1.669
'train' 46.259
'validation' 1,162
  • Caratteristiche:
Translation({
    'it': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/pt_to_en

  • Descrizione Config: dataset traduzione da pt a en in testo normale.

  • divide:

Diviso Esempi
'test' 1.803
'train' 51.785
'validation' 1.193
  • Caratteristiche:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/ru_to_en

  • Descrizione Config: dataset traduzione da ru a en in testo normale.

  • divide:

Diviso Esempi
'test' 5.476
'train' 208,106
'validation' 4.805
  • Caratteristiche:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'ru': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/ru_to_pt

  • Descrizione Config: dataset traduzione da ru al pt in testo normale.

  • divide:

Diviso Esempi
'test' 1.588
'train' 47.278
'validation' 1.184
  • Caratteristiche:
Translation({
    'pt': Text(shape=(), dtype=tf.string),
    'ru': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/tr_to_en

  • Descrizione Config: dataset traduzione da tr a en in testo normale.

  • divide:

Diviso Esempi
'test' 5,029
'train' 182.450
'validation' 4.045
  • Caratteristiche:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'tr': Text(shape=(), dtype=tf.string),
})