- Описание:
Предложения Википедии с обозначенными выступающими промежутками.
Домашняя страница: https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia
Исходный код:
tfds.text.SalientSpanWikipedia
Версии:
-
1.0.0
( по умолчанию): Нет Замечания к выпуску.
-
Размер загрузки:
Unknown size
Авто-кэшируются ( документация ): Нет
Контролируемые ключи (см
as_supervised
документ ):None
Рис ( tfds.show_examples ): Не поддерживается.
Образец цитирования:
@article{guu2020realm,
title={REALM: Retrieval-Augmented Language Model Pre-Training},
author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
year={2020},
journal = {arXiv e-prints},
archivePrefix = {arXiv},
eprint={2002.08909},
}
salient_span_wikipedia / предложения (конфигурация по умолчанию)
Описание конфигурации: Примеры являются отдельными предложениями , содержащих объекты.
Dataset Размер:
20.57 GiB
расколы:
Расколоть | Примеры |
---|---|
'train' | 82 291 706 |
- Особенности:
FeaturesDict({
'spans': Sequence({
'limit': tf.int32,
'start': tf.int32,
'type': tf.string,
}),
'text': Text(shape=(), dtype=tf.string),
'title': Text(shape=(), dtype=tf.string),
})
- Примеры ( tfds.as_dataframe ):
salient_span_wikipedia / документы
Описание конфигурации: Примеры повторно документы в полном объеме.
Dataset Размер:
16.52 GiB
расколы:
Расколоть | Примеры |
---|---|
'train' | 13 353 718 |
- Особенности:
FeaturesDict({
'sentences': Sequence({
'limit': tf.int32,
'start': tf.int32,
}),
'spans': Sequence({
'limit': tf.int32,
'start': tf.int32,
'type': tf.string,
}),
'text': Text(shape=(), dtype=tf.string),
'title': Text(shape=(), dtype=tf.string),
})
- Примеры ( tfds.as_dataframe ):