salient_span_wikipedia

• Описание:

Предложения Википедии с обозначенными выступающими промежутками.

• Домашняя страница: https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia

• Исходный код: tfds.text.SalientSpanWikipedia

• Версии:

  • 1.0.0 ( по умолчанию): Нет Замечания к выпуску.

• Размер загрузки: Unknown size

• Авто-кэшируются ( документация ): Нет

• Контролируемые ключи (см as_supervised документ ): None

• Рис ( tfds.show_examples ): Не поддерживается.

• Образец цитирования:

@article{guu2020realm,
    title={REALM: Retrieval-Augmented Language Model Pre-Training},
    author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
    year={2020},
    journal = {arXiv e-prints},
    archivePrefix = {arXiv},
    eprint={2002.08909},
}

salient_span_wikipedia / предложения (конфигурация по умолчанию)

• Описание конфигурации: Примеры являются отдельными предложениями , содержащих объекты.

• Dataset Размер: 20.57 GiB

• расколы:

• Особенности:

FeaturesDict({
    'spans': Sequence({
        'limit': tf.int32,
        'start': tf.int32,
        'type': tf.string,
    }),
    'text': Text(shape=(), dtype=tf.string),
    'title': Text(shape=(), dtype=tf.string),
})

• Примеры ( tfds.as_dataframe ):

salient_span_wikipedia / документы

• Описание конфигурации: Примеры повторно документы в полном объеме.

• Dataset Размер: 16.52 GiB

• расколы:

• Особенности:

FeaturesDict({
    'sentences': Sequence({
        'limit': tf.int32,
        'start': tf.int32,
    }),
    'spans': Sequence({
        'limit': tf.int32,
        'start': tf.int32,
        'type': tf.string,
    }),
    'text': Text(shape=(), dtype=tf.string),
    'title': Text(shape=(), dtype=tf.string),
})

• Примеры ( tfds.as_dataframe ):