גרף

  • תיאור :

מערך הנתונים של Google RefExp הוא אוסף של תיאורי טקסט של אובייקטים בתמונות שמתבסס על מערך הנתונים הזמין הציבורי של MS-COCO. בעוד שכתוביות התמונה ב-MS-COCO חלות על התמונה כולה, מערך נתונים זה מתמקד בתיאורי טקסט המאפשרים לזהות באופן ייחודי אובייקט או אזור בודד בתוך תמונה. ראה פרטים נוספים במאמר זה: יצירה והבנה של תיאורי אובייקט חד משמעיים.

  • תיעוד נוסף : חקור על ניירות עם קוד

  • דף הבית : https://github.com/mjhucla/Google_Refexp_toolbox

  • קוד מקור : tfds.vision_language.gref.Gref

  • גרסאות :

    • 1.0.0 (ברירת מחדל): שחרור ראשוני.
  • גודל הורדה : Unknown size

  • גודל מערך נתונים : 4.60 GiB

  • הוראות הורדה ידניות : מערך נתונים זה מחייב אותך להוריד את נתוני המקור באופן ידני אל download_config.manual_dir (ברירת המחדל היא ~/tensorflow_datasets/downloads/manual/ ):
    עקוב אחר ההוראות בכתובת https://github.com/mjhucla/Google_Refexp_toolbox כדי להוריד ולעבד מראש את הנתונים לפורמט מיושר עם COCO. הספרייה מכילה 2 קבצים ותיקיה אחת:

  • google_refexp_train_201511_coco_aligned_catg.json

  • google_refexp_val_201511_coco_aligned_catg.json

  • coco_train2014/

התיקיה coco_train2014 מכילה את כל תמונות ההדרכה של COCO 2014.

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • פיצולים :

לְפַצֵל דוגמאות
'train' 24,698
'validation' 4,650
  • מבנה תכונה :
FeaturesDict({
   
'image': Image(shape=(None, None, 3), dtype=uint8),
   
'image/id': int64,
   
'objects': Sequence({
       
'area': int64,
       
'bbox': BBoxFeature(shape=(4,), dtype=float32),
       
'id': int64,
       
'label': int64,
       
'label_name': ClassLabel(shape=(), dtype=int64, num_classes=80),
       
'refexp': Sequence({
           
'raw': Text(shape=(), dtype=string),
           
'referent': Text(shape=(), dtype=string),
           
'refexp_id': int64,
           
'tokens': Sequence(Text(shape=(), dtype=string)),
       
}),
   
}),
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
תמונה תמונה (אין, אין, 3) uint8
תמונה/מזהה מוֹתֵחַ int64
חפצים סדר פעולות
חפצים/שטח מוֹתֵחַ int64
אובייקטים/bbox BBoxFeature (4,) לצוף32
אובייקטים/מזהה מוֹתֵחַ int64
חפצים/תווית מוֹתֵחַ int64
objects/label_name ClassLabel int64
אובייקטים / refexp סדר פעולות
objects/refexp/raw טֶקסט חוּט
objects/refexp/referent טֶקסט חוּט
objects/refexp/refexp_id מוֹתֵחַ int64
אובייקטים/refexp/אסימונים רצף (טקסט) (אף אחד,) חוּט

רְאִיָה

  • ציטוט :
@inproceedings{mao2016generation,
  title
={Generation and Comprehension of Unambiguous Object Descriptions},
  author
={Mao, Junhua and Huang, Jonathan and Toshev, Alexander and Camburu, Oana and Yuille, Alan and Murphy, Kevin},
  booktitle
={CVPR},
  year
={2016}
}