hellaswag

  • Description:

L'ensemble de données HellaSwag est une référence pour Commonsense NLI. Il comprend un contexte et quelques terminaisons qui complètent le contexte.

Diviser Exemples
'test' 10 003
'train' 39 905
'validation' 10 042
  • Caractéristiques:
FeaturesDict({
    'activity_label': Text(shape=(), dtype=tf.string),
    'context': Text(shape=(), dtype=tf.string),
    'endings': Sequence(Text(shape=(), dtype=tf.string)),
    'label': tf.int32,
    'split_type': Text(shape=(), dtype=tf.string),
})
  • citation:
@inproceedings{zellers2019hellaswag,
    title={HellaSwag: Can a Machine Really Finish Your Sentence?},
    author={Zellers, Rowan and Holtzman, Ari and Bisk, Yonatan and Farhadi, Ali and Choi, Yejin},
    booktitle ={Proceedings of the 57th Annual Meeting of the Association for Computational Linguistics},
    year={2019}
}