- Описание :
Предложения Википедии с обозначенными выступающими промежутками.
Домашняя страница : https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia
Исходный код :
tfds.text.SalientSpanWikipedia
Версии :
-
1.0.0
(по умолчанию): без примечаний к выпуску.
-
Размер загрузки :
Unknown size
Автоматическое кэширование ( документация ): Нет
Контролируемые ключи (см.
as_supervised
):None
Цитата :
@article{guu2020realm,
title={REALM: Retrieval-Augmented Language Model Pre-Training},
author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
year={2020},
journal = {arXiv e-prints},
archivePrefix = {arXiv},
eprint={2002.08909},
}
- Рисунок ( tfds.show_examples ): не поддерживается.
salient_span_wikipedia / предложения (конфигурация по умолчанию)
Описание конфигурации : Примеры - отдельные предложения, содержащие сущности.
Размер набора данных :
20.57 GiB
Сплит :
Трещина | Примеры |
---|---|
'train' | 82 291 706 |
- Особенности :
FeaturesDict({
'spans': Sequence({
'limit': tf.int32,
'start': tf.int32,
'type': tf.string,
}),
'text': Text(shape=(), dtype=tf.string),
'title': Text(shape=(), dtype=tf.string),
})
- Примеры ( tfds.as_dataframe ):
salient_span_wikipedia / документы
Описание конфигурации : Примеры переполнения документов.
Размер набора данных :
16.52 GiB
Сплит :
Трещина | Примеры |
---|---|
'train' | 13 353 718 |
- Особенности :
FeaturesDict({
'sentences': Sequence({
'limit': tf.int32,
'start': tf.int32,
}),
'spans': Sequence({
'limit': tf.int32,
'start': tf.int32,
'type': tf.string,
}),
'text': Text(shape=(), dtype=tf.string),
'title': Text(shape=(), dtype=tf.string),
})
- Примеры ( tfds.as_dataframe ):