salient_span_wikipedia

• תיאור :

משפטים בוויקיפדיה עם טווחים בולטים מסומנים.

• דף הבית : https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia

• קוד מקור : tfds.datasets.salient_span_wikipedia.Builder

• גרסאות :

  • 1.0.0 (ברירת מחדל): אין הערות שחרור.

• גודל הורדה : Unknown size

• שמירה אוטומטית במטמון ( תיעוד ): לא

• מפתחות בפיקוח (ראה as_supervised doc ): None

• איור ( tfds.show_examples ): לא נתמך.

• ציטוט :

@article{guu2020realm,
    title={REALM: Retrieval-Augmented Language Model Pre-Training},
    author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
    year={2020},
    journal = {arXiv e-prints},
    archivePrefix = {arXiv},
    eprint={2002.08909},
}

salient_span_wikipedia/sences (תצורת ברירת מחדל)

• תיאור תצורה : דוגמאות הן משפטים בודדים המכילים ישויות.

• גודל מערך נתונים : 20.57 GiB

• פיצולים :

לְפַצֵל	דוגמאות
'train'	82,291,706

• מבנה תכונה :

FeaturesDict({
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• תיעוד תכונה :

תכונה	מעמד	צוּרָה	Dtype	תיאור
	FeaturesDict
משתרעים	סדר פעולות
טווחים/מגבלה	מוֹתֵחַ		int32
משתרע/התחל	מוֹתֵחַ		int32
טווחים/סוג	מוֹתֵחַ		חוּט
טֶקסט	טֶקסט		חוּט
כותרת	טֶקסט		חוּט

• דוגמאות ( tfds.as_dataframe ):

salient_span_wikipedia/מסמכים

• תיאור תצורה : דוגמאות למסמכים מלאים.

• גודל מערך נתונים : 16.52 GiB

• פיצולים :

לְפַצֵל	דוגמאות
'train'	13,353,718

• מבנה תכונה :

FeaturesDict({
    'sentences': Sequence({
        'limit': int32,
        'start': int32,
    }),
    'spans': Sequence({
        'limit': int32,
        'start': int32,
        'type': string,
    }),
    'text': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• תיעוד תכונה :

תכונה	מעמד	צוּרָה	Dtype	תיאור
	FeaturesDict
משפטים	סדר פעולות
משפטים/מגבלה	מוֹתֵחַ		int32
משפטים/התחלה	מוֹתֵחַ		int32
משתרעים	סדר פעולות
טווחים/מגבלה	מוֹתֵחַ		int32
משתרע/התחל	מוֹתֵחַ		int32
טווחים/סוג	מוֹתֵחַ		חוּט
טֶקסט	טֶקסט		חוּט
כותרת	טֶקסט		חוּט

• דוגמאות ( tfds.as_dataframe ):