सलामी_स्पैन_विकिपीडिया

  • विवरण :

विकीपीडिया के वाक्य लेबल वाले सैलिएंट स्पैन के साथ।

@article{guu2020realm,
    title={REALM: Retrieval-Augmented Language Model Pre-Training},
    author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
    year={2020},
    journal = {arXiv e-prints},
    archivePrefix = {arXiv},
    eprint={2002.08909},
}

salient_span_wikipedia/वाक्य (डिफ़ॉल्ट कॉन्फ़िगरेशन)

  • विन्यास विवरण : उदाहरण व्यक्तिगत वाक्य हैं जिनमें संस्थाएँ हैं।

  • डेटासेट का आकार : 20.57 GiB

  • विभाजन :

विभाजित करना उदाहरण
'train' 82,291,706
  • फ़ीचर संरचना :
FeaturesDict({
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})
  • फ़ीचर दस्तावेज़ीकरण :
विशेषता कक्षा आकार डीटाइप विवरण
विशेषताएं डिक्ट
फैला क्रम
फैलाव / सीमा टेन्सर int32
स्पैन / स्टार्ट टेन्सर int32
विस्तार/प्रकार टेन्सर डोरी
मूलपाठ मूलपाठ डोरी
शीर्षक मूलपाठ डोरी

salient_span_wikipedia/documents

  • कॉन्फ़िगरेशन विवरण : उदाहरण पूर्ण दस्तावेज़ हैं।

  • डेटासेट का आकार : 16.52 GiB

  • विभाजन :

विभाजित करना उदाहरण
'train' 13,353,718
  • फ़ीचर संरचना :
FeaturesDict({
    'sentences': Sequence({
        'limit': int32,
        'start': int32,
    }),
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})
  • फ़ीचर दस्तावेज़ीकरण :
विशेषता कक्षा आकार डीटाइप विवरण
विशेषताएं डिक्ट
वाक्य क्रम
वाक्य/सीमा टेन्सर int32
वाक्य/प्रारंभ टेन्सर int32
फैला क्रम
फैलाव / सीमा टेन्सर int32
स्पैन / स्टार्ट टेन्सर int32
विस्तार/प्रकार टेन्सर डोरी
मूलपाठ मूलपाठ डोरी
शीर्षक मूलपाठ डोरी