Pomoc chronić Wielkiej Rafy Koralowej z TensorFlow na Kaggle Dołącz Wyzwanie

opus

  • opis:

OPUS to zbiór przetłumaczonych tekstów z sieci.

Utwórz własną konfigurację, aby wybrać parę danych/języków do załadowania.

config = tfds.translate.opus.OpusConfig(
    version=tfds.core.Version('0.1.0'),
    language_pair=("de", "en"),
    subsets=["GNOME", "EMEA"]
)
builder = tfds.builder("opus", config=config)
Translation({
    'de': Text(shape=(), dtype=tf.string),
    'en': Text(shape=(), dtype=tf.string),
})
@inproceedings{Tiedemann2012ParallelData,
  author = {Tiedemann, J},
  title = {Parallel Data, Tools and Interfaces in OPUS},
  booktitle = {LREC}
  year = {2012} }

opus/medycyna (domyślna konfiguracja)

  • Opis config: dokumenty medyczne

  • Wielkość pliku: 34.29 MiB

  • Zbiór danych rozmiar: 188.85 MiB

  • Auto-buforowane ( dokumentacja ): Tylko kiedy shuffle_files=False (pociąg)

  • dzieli:

Podział Przykłady
'train' 1 108 752

opus/prawo

  • Opis config: dokumenty prawne

  • Wielkość pliku: 46.99 MiB

  • Zbiór danych rozmiar: 214.44 MiB

  • Auto-buforowane ( dokumentacja ): Tylko kiedy shuffle_files=False (pociąg)

  • dzieli:

Podział Przykłady
'train' 719 372

opus/koran

  • Opis config: dokumenty Koran

  • Wielkość pliku: 35.42 MiB

  • Zbiór danych rozmiar: 117.54 MiB

  • Auto-buforowane ( dokumentacja ): Tak

  • dzieli:

Podział Przykłady
'train' 537,128

opus/IT

  • Opis config: dokumenty IT

  • Wielkość pliku: 10.33 MiB

  • Zbiór danych rozmiar: 42.51 MiB

  • Auto-buforowane ( dokumentacja ): Tak

  • dzieli:

Podział Przykłady
'train' 347 817

opus/napisy

  • Opis config: napisy dokumenty

  • Wielkość pliku: 677.64 MiB

  • Zestaw danych rozmiar: 2.01 GiB

  • Auto-buforowane ( dokumentacja ): Nie

  • dzieli:

Podział Przykłady
'train' 22 512 639