cnn_daymail

• תיאור :

מערך נתונים של סיכום לא אנונימי של CNN/DailyMail.

ישנן שתי תכונות: - מאמר: טקסט של מאמר חדשותי, המשמש כמסמך שיש לסכם - דגשים: טקסט מצורף של דגשים עם ומסביב לכל דגש, שהוא סיכום היעד

• תיעוד נוסף : חקור על ניירות עם קוד

• דף הבית : https://github.com/abisee/cnn-dailymail

• קוד מקור : tfds.summarization.CnnDailymail

• גרסאות :

  • 1.0.0 : API חדש מפוצל ( https://tensorflow.org/datasets/splits )

  • 2.0.0 : הפרד משפטי יעד עם שורה חדשה. (כאשר המודל יחזה מפרידי שורות חדשות, קל יותר להעריך באמצעות ROUGE ברמת הסיכום.)

  • 3.0.0 : משתמש בגרסת מארז.

  • 3.1.0 : הוסר BuilderConfig

  • 3.2.0 : הסר רווח נוסף לפני הוספת פרק משפט. זה לא אמור להשפיע על ציוני ROUGE מכיוון שסימני הפיסוק מוסרים.

  • 3.3.0 : הוסף תכונה של בעל אתר.

  • 3.4.0 (ברירת מחדל): הוספת תכונה מזהה.

• גודל הורדה : 558.32 MiB

• גודל מערך נתונים : 1.29 GiB

• שמירה אוטומטית במטמון ( תיעוד ): לא

• פיצולים :

לְפַצֵל	דוגמאות
'test'	11,490
'train'	287,113
'validation'	13,368

• מבנה תכונה :

FeaturesDict({
    'article': Text(shape=(), dtype=string),
    'highlights': Text(shape=(), dtype=string),
    'id': Text(shape=(), dtype=string),
    'publisher': Text(shape=(), dtype=string),
})

• תיעוד תכונה :

תכונה	מעמד	צוּרָה	Dtype	תיאור
	FeaturesDict
מאמר	טֶקסט		חוּט
עיקרי הדברים	טֶקסט		חוּט
תְעוּדַת זֶהוּת	טֶקסט		חוּט
מוֹצִיא לָאוֹר	טֶקסט		חוּט

• מפתחות בפיקוח (ראה as_supervised doc ): ('article', 'highlights')

• איור ( tfds.show_examples ): לא נתמך.

• דוגמאות ( tfds.as_dataframe ):

• ציטוט :

@article{DBLP:journals/corr/SeeLM17,
  author    = {Abigail See and
               Peter J. Liu and
               Christopher D. Manning},
  title     = {Get To The Point: Summarization with Pointer-Generator Networks},
  journal   = {CoRR},
  volume    = {abs/1704.04368},
  year      = {2017},
  url       = {http://arxiv.org/abs/1704.04368},
  archivePrefix = {arXiv},
  eprint    = {1704.04368},
  timestamp = {Mon, 13 Aug 2018 16:46:08 +0200},
  biburl    = {https://dblp.org/rec/bib/journals/corr/SeeLM17},
  bibsource = {dblp computer science bibliography, https://dblp.org}
}

@inproceedings{hermann2015teaching,
  title={Teaching machines to read and comprehend},
  author={Hermann, Karl Moritz and Kocisky, Tomas and Grefenstette, Edward and Espeholt, Lasse and Kay, Will and Suleyman, Mustafa and Blunsom, Phil},
  booktitle={Advances in neural information processing systems},
  pages={1693--1701},
  year={2015}
}