ted_hrlr_translate

  • Description:

Ensembles de données dérivés des transcriptions des discussions TED pour comparer des paires de langues similaires où l'une est riche en ressources et l'autre en ressources faibles.

@inproceedings{Ye2018WordEmbeddings,
  author  = {Ye, Qi and Devendra, Sachan and Matthieu, Felix and Sarguna, Padmanabhan and Graham, Neubig},
  title   = {When and Why are pre-trained word embeddings useful for Neural Machine Translation},
  booktitle = {HLT-NAACL},
  year    = {2018},
  }

ted_hrlr_translate/az_to_en (configuration par défaut)

  • Description Config: jeu de données Une traduction az à en en clair.

  • scissions:

Diviser Exemples
'test' 903
'train' 5 946
'validation' 671
  • Caractéristiques:
Translation({
    'az': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/aztr_to_en

  • Description Config: jeu de données Une traduction az_tr à en en texte brut.

  • scissions:

Diviser Exemples
'test' 903
'train' 188 396
'validation' 671
  • Caractéristiques:
Translation({
    'az_tr': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/be_to_en

  • Description Config: jeu de données Une traduction soit à en en texte brut.

  • scissions:

Diviser Exemples
'test' 664
'train' 4 509
'validation' 248
  • Caractéristiques:
Translation({
    'be': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/beru_to_en

  • Description Config: jeu de données Une traduction be_ru à en en texte brut.

  • scissions:

Diviser Exemples
'test' 664
'train' 212 614
'validation' 248
  • Caractéristiques:
Translation({
    'be_ru': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/es_to_pt

  • Description Config: ensemble de données Une traduction es à pt en texte brut.

  • scissions:

Diviser Exemples
'test' 1 763
'train' 44 938
'validation' 1 016
  • Caractéristiques:
Translation({
    'es': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/fr_to_pt

  • Description Config: jeu de données Une traduction fr à pt en texte brut.

  • scissions:

Diviser Exemples
'test' 1 494
'train' 43 873
'validation' 1 131
  • Caractéristiques:
Translation({
    'fr': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/gl_to_en

  • Description Config: jeu de données Une traduction gl à en en texte brut.

  • scissions:

Diviser Exemples
'test' 1007
'train' 10 017
'validation' 682
  • Caractéristiques:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'gl': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/glpt_to_en

  • Description Config: jeu de données Une traduction gl_pt à en en texte brut.

  • scissions:

Diviser Exemples
'test' 1007
'train' 61 802
'validation' 682
  • Caractéristiques:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'gl_pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/he_to_pt

  • Description Config: jeu de données Une traduction il à pt en texte brut.

  • scissions:

Diviser Exemples
'test' 1 623
'train' 48 511
'validation' 1 145
  • Caractéristiques:
Translation({
    'he': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/it_to_pt

  • Description Config: jeu de données Une traduction à pt en texte brut.

  • scissions:

Diviser Exemples
'test' 1 669
'train' 46 259
'validation' 1 162
  • Caractéristiques:
Translation({
    'it': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/pt_to_en

  • Description Config: jeu de données Une traduction pt à en en texte brut.

  • scissions:

Diviser Exemples
'test' 1 803
'train' 51 785
'validation' 1 193
  • Caractéristiques:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'pt': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/ru_to_en

  • Description Config: jeu de données Une traduction ru à en en clair.

  • scissions:

Diviser Exemples
'test' 5 476
'train' 208 106
'validation' 4 805
  • Caractéristiques:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'ru': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/ru_to_pt

  • Description Config: jeu de données Une traduction ru à pt en texte brut.

  • scissions:

Diviser Exemples
'test' 1 588
'train' 47 278
'validation' 1 184
  • Caractéristiques:
Translation({
    'pt': Text(shape=(), dtype=tf.string),
    'ru': Text(shape=(), dtype=tf.string),
})

ted_hrlr_translate/tr_to_en

  • Description Config: jeu de données Une traduction tr à en en texte brut.

  • scissions:

Diviser Exemples
'test' 5 029
'train' 182.450
'validation' 4 045
  • Caractéristiques:
Translation({
    'en': Text(shape=(), dtype=tf.string),
    'tr': Text(shape=(), dtype=tf.string),
})