the_pile_openwebtext2

הפניות:

• קוד
• מחבקת פנים

טקסט_פשוט

השתמש בפקודה הבאה כדי לטעון מערך נתונים זה ב-TFDS:

ds = tfds.load('huggingface:the_pile_openwebtext2/plain_text')

• תיאור :

OpenWebText2 is an enhanced version of the original OpenWebTextCorpus covering all Reddit submissions from 2005 up until April 2020, with further months becoming available after the corresponding PushShift dump files are released.

• רישיון : אין רישיון ידוע
• גרסה : 1.0.0
• פיצולים :

• מאפיינים :

{
    "title": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "text": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    }
}