anli

  • Description:

Adversarial NLI (ANLI) est un ensemble de données de référence NLI à grande échelle, collecté via une procédure itérative et contradictoire d'humain et de modèle dans la boucle.

FeaturesDict({
    'context': Text(shape=(), dtype=tf.string),
    'hypothesis': Text(shape=(), dtype=tf.string),
    'label': ClassLabel(shape=(), dtype=tf.int64, num_classes=3),
    'uid': Text(shape=(), dtype=tf.string),
})
@inproceedings{Nie2019AdversarialNA,
    title = "Adversarial NLI: A New Benchmark for Natural Language Understanding",
    author = "Nie, Yixin and
      Williams, Adina and
      Dinan, Emily  and
      Bansal, Mohit and
      Weston, Jason and
      Kiela, Douwe",
      year="2019",
    url ="https://arxiv.org/abs/1910.14599"
}

anli/r1 (configuration par défaut)

  • Description Config: Round One

  • Dataset Taille: 9.04 MiB

  • scissions:

Diviser Exemples
'test' 1 000
'train' 16 946
'validation' 1 000

anli/r2

  • Description Config: Round Two

  • Dataset Taille: 22.39 MiB

  • scissions:

Diviser Exemples
'test' 1 000
'train' 45 460
'validation' 1 000

anli/r3

  • Description Config: Troisième round

  • Dataset Taille: 47.03 MiB

  • scissions:

Diviser Exemples
'test' 1 200
'train' 100 459
'validation' 1 200