salient_span_wikipedia

• Описание :

Предложения Википедии с помеченными выступающими интервалами.

• Домашняя страница : https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia

• Исходный код : tfds.datasets.salient_span_wikipedia.Builder

• Версии :

  • 1.0.0 (по умолчанию): нет примечаний к выпуску.

• Размер загрузки : Unknown size

• Автоматическое кэширование ( документация ): Нет

• Ключи под наблюдением (см . документ as_supervised ): None

• Рисунок ( tfds.show_examples ): не поддерживается.

• Цитата :

@article{guu2020realm,
    title={REALM: Retrieval-Augmented Language Model Pre-Training},
    author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
    year={2020},
    journal = {arXiv e-prints},
    archivePrefix = {arXiv},
    eprint={2002.08909},
}

salient_span_wikipedia/sentences (конфигурация по умолчанию)

• Описание конфигурации : примеры — это отдельные предложения, содержащие сущности.

• Размер набора данных : 20.57 GiB

• Сплиты :

• Структура функции :

FeaturesDict({
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• Документация по функциям :

• Примеры ( tfds.as_dataframe ):

salient_span_wikipedia/документы

• Описание конфигурации : Примеры полных документов.

• Размер набора данных : 16.52 GiB

• Сплиты :

• Структура функции :

FeaturesDict({
    'sentences': Sequence({
        'limit': int32,
        'start': int32,
    }),
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• Документация по функциям :

• Примеры ( tfds.as_dataframe ):