- תיאור :
מערך נתונים של סיכום לא אנונימי של CNN/DailyMail.
ישנן שתי תכונות: - מאמר: טקסט של מאמר חדשותי, המשמש כמסמך שיש לסכם - דגשים: טקסט מצורף של דגשים עם ומסביב לכל דגש, שהוא סיכום היעד
תיעוד נוסף : חקור על ניירות עם קוד
דף הבית : https://github.com/abisee/cnn-dailymail
קוד מקור :
tfds.summarization.CnnDailymail
גרסאות :
-
1.0.0
: API חדש מפוצל ( https://tensorflow.org/datasets/splits ) 2.0.0
: הפרד משפטי יעד עם שורה חדשה. (כאשר המודל יחזה מפרידי שורות חדשות, קל יותר להעריך באמצעות ROUGE ברמת הסיכום.)3.0.0
: משתמש בגרסת מארז.3.1.0
: הוסר BuilderConfig3.2.0
: הסר רווח נוסף לפני הוספת פרק משפט. זה לא אמור להשפיע על ציוני ROUGE מכיוון שסימני הפיסוק מוסרים.3.3.0
: הוסף תכונה של בעל אתר.3.4.0
(ברירת מחדל): הוספת תכונה מזהה.
-
גודל הורדה :
558.32 MiB
גודל מערך נתונים :
1.29 GiB
שמירה אוטומטית במטמון ( תיעוד ): לא
פיצולים :
לְפַצֵל | דוגמאות |
---|---|
'test' | 11,490 |
'train' | 287,113 |
'validation' | 13,368 |
- מבנה תכונה :
FeaturesDict({
'article': Text(shape=(), dtype=string),
'highlights': Text(shape=(), dtype=string),
'id': Text(shape=(), dtype=string),
'publisher': Text(shape=(), dtype=string),
})
- תיעוד תכונה :
תכונה | מעמד | צוּרָה | Dtype | תיאור |
---|---|---|---|---|
FeaturesDict | ||||
מאמר | טֶקסט | חוּט | ||
עיקרי הדברים | טֶקסט | חוּט | ||
תְעוּדַת זֶהוּת | טֶקסט | חוּט | ||
מוֹצִיא לָאוֹר | טֶקסט | חוּט |
מפתחות בפיקוח (ראה
as_supervised
doc ):('article', 'highlights')
איור ( tfds.show_examples ): לא נתמך.
דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@article{DBLP:journals/corr/SeeLM17,
author = {Abigail See and
Peter J. Liu and
Christopher D. Manning},
title = {Get To The Point: Summarization with Pointer-Generator Networks},
journal = {CoRR},
volume = {abs/1704.04368},
year = {2017},
url = {http://arxiv.org/abs/1704.04368},
archivePrefix = {arXiv},
eprint = {1704.04368},
timestamp = {Mon, 13 Aug 2018 16:46:08 +0200},
biburl = {https://dblp.org/rec/bib/journals/corr/SeeLM17},
bibsource = {dblp computer science bibliography, https://dblp.org}
}
@inproceedings{hermann2015teaching,
title={Teaching machines to read and comprehend},
author={Hermann, Karl Moritz and Kocisky, Tomas and Grefenstette, Edward and Espeholt, Lasse and Kay, Will and Suleyman, Mustafa and Blunsom, Phil},
booktitle={Advances in neural information processing systems},
pages={1693--1701},
year={2015}
}