ai2_arc

  • Açıklama :

7.787 orijinal ilkokul düzeyinde, çoktan seçmeli bilim sorularından oluşan yeni bir veri seti, gelişmiş soru yanıtlama konusunda araştırmayı teşvik etmek için bir araya getirildi. Veri kümesi, bir Zorluk Kümesi ve bir Kolay Küme olarak bölünmüştür; burada ilki, yalnızca hem alma tabanlı bir algoritma hem de bir kelime birlikte oluşum algoritması tarafından yanlış yanıtlanan soruları içerir. Ayrıca, görevle ilgili 14 milyondan fazla bilim cümlesinden oluşan bir külliyat ve bu veri kümesi için üç nöral temel modelin bir uygulamasını da dahil ediyoruz. ARC'yi toplum için bir meydan okuma olarak görüyoruz.

FeaturesDict({
    'answerKey': ClassLabel(shape=(), dtype=int64, num_classes=5),
    'choices': Sequence({
        'label': ClassLabel(shape=(), dtype=int64, num_classes=5),
        'text': Text(shape=(), dtype=string),
    }),
    'id': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
cevap anahtarı SınıfEtiketi int64
seçimler Sekans
seçenekler/etiket SınıfEtiketi int64
seçimler/metin Metin sicim
İD Metin sicim
soru Metin sicim
@article{allenai:arc,
      author    = {Peter Clark  and Isaac Cowhey and Oren Etzioni and Tushar Khot and
                    Ashish Sabharwal and Carissa Schoenick and Oyvind Tafjord},
      title     = {Think you have Solved Question Answering? Try ARC, the AI2 Reasoning Challenge},
      journal   = {arXiv:1803.05457v1},
      year      = {2018},
}

ai2_arc/ARC-Challenge (varsayılan yapılandırma)

  • Yapılandırma açıklaması : Zorluk 2590 "zor" sorudan oluşan set (hem geri getirme hem de birlikte oluşum yönteminin doğru yanıtlayamadığı sorular)

  • Veri kümesi boyutu : 939.91 KiB

  • bölmeler :

Bölmek örnekler
'test' 1.172
'train' 1.119
'validation' 299

ai2_arc/ARC-Kolay

  • Yapılandırma açıklaması : ARC Mücadelesi için 5197 sorudan oluşan Kolay Set.

  • Veri kümesi boyutu : 1.63 MiB

  • bölmeler :

Bölmek örnekler
'test' 2.376
'train' 2.251
'validation' 570