natural_questions_open

  • 説明

Leeet.alによって導入されたNQ-Openタスク。 2019は、NaturalQuestionsから派生したオープンドメインの質問応答ベンチマークです。目標は、入力された英語の質問に対する英語の回答文字列を予測することです。すべての質問は、英語版ウィキペディアのコンテンツを使用して回答できます。

スプリット
'train' 87,925
'validation' 3,610
  • 特長
FeaturesDict({
    'answer': Sequence(tf.string),
    'question': tf.string,
})
  • 引用
@inproceedings{orqa,
title = {Latent Retrieval for Weakly Supervised Open Domain Question Answering},
author = {Lee, Kenton and Chang, Ming-Wei and Toutanova, Kristina},
year = {2019},
month = {01},
pages = {6086-6096},
booktitle = {Proceedings of the 57th Annual Meeting of the Association for Computational Linguistics},
doi = {10.18653/v1/P19-1612}
}

@article{47761,
title = {Natural Questions: a Benchmark for Question Answering Research},
author = {Tom Kwiatkowski and Jennimaria Palomaki and Olivia Redfield and Michael Collins and Ankur Parikh and Chris Alberti and Danielle Epstein and Illia Polosukhin and Matthew Kelcey and Jacob Devlin and Kenton Lee and Kristina N. Toutanova and Llion Jones and Ming-Wei Chang and Andrew Dai and Jakob Uszkoreit and Quoc Le and Slav Petrov},
year = {2019},
journal = {Transactions of the Association of Computational Linguistics}
}