gigaword

  • คำอธิบาย :

การสร้างหัวข้อข่าวในคลังบทความคู่จาก Gigaword ซึ่งประกอบด้วยบทความประมาณ 4 ล้านบทความ ใช้ 'org_data' ที่จัดทำโดย https://github.com/microsoft/unilm/ ซึ่งเหมือนกับ https://github.com/harvardnlp/sent-summary แต่มีรูปแบบที่ดีกว่า

มีสองคุณสมบัติ: - เอกสาร: บทความ - สรุป: หัวเรื่อง.

แยก ตัวอย่าง
'test' 1,951
'train' 3,803,957
'validation' 189,651
  • โครงสร้างคุณลักษณะ :
FeaturesDict({
   
'document': Text(shape=(), dtype=string),
   
'summary': Text(shape=(), dtype=string),
})
  • เอกสารคุณสมบัติ :
ลักษณะเฉพาะ ระดับ รูปร่าง Dประเภท คำอธิบาย
คุณสมบัติDict
เอกสาร ข้อความ สตริง
สรุป ข้อความ สตริง
  • การอ้างอิง :
@article{graff2003english,
  title
={English gigaword},
  author
={Graff, David and Kong, Junbo and Chen, Ke and Maeda, Kazuaki},
  journal
={Linguistic Data Consortium, Philadelphia},
  volume
={4},
  number
={1},
  pages
={34},
  year
={2003}
}

@article{Rush_2015,
   title
={A Neural Attention Model for Abstractive Sentence Summarization},
   url
={http://dx.doi.org/10.18653/v1/D15-1044},
   DOI
={10.18653/v1/d15-1044},
   journal
={Proceedings of the 2015 Conference on Empirical Methods in Natural Language Processing},
   publisher
={Association for Computational Linguistics},
   author
={Rush, Alexander M. and Chopra, Sumit and Weston, Jason},
   year
={2015}
}