cmu_stretch

• Keterangan :

Halo interaksi dapur robot peregangan

• Beranda : https://robo-affordances.github.io/

• Kode sumber : tfds.robotics.rtx.CmuStretch

• Versi :

  • 0.1.0 (default): Rilis awal.

• Ukuran unduhan : Unknown size

• Ukuran kumpulan data : 728.06 MiB

• Cache otomatis ( dokumentasi ): Tidak

• Perpecahan :

Membelah	Contoh
'train'	135

• Struktur fitur :

FeaturesDict({
    'episode_metadata': FeaturesDict({
        'file_path': Text(shape=(), dtype=string),
    }),
    'steps': Dataset({
        'action': Tensor(shape=(8,), dtype=float32),
        'discount': Scalar(shape=(), dtype=float32),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'language_embedding': Tensor(shape=(512,), dtype=float32),
        'language_instruction': Text(shape=(), dtype=string),
        'observation': FeaturesDict({
            'image': Image(shape=(128, 128, 3), dtype=uint8),
            'state': Tensor(shape=(4,), dtype=float32),
        }),
        'reward': Scalar(shape=(), dtype=float32),
    }),
})

• Dokumentasi fitur :

Fitur	Kelas	Membentuk	Tipe D	Keterangan
	FiturDict
episode_metadata	FiturDict
episode_metadata/file_path	Teks		rangkaian	Jalur ke file data asli.
Langkah	Himpunan data
langkah/tindakan	Tensor	(8,)	float32	Aksi robot, terdiri dari [3x ee pos, 3x ee rot, 1x aksi biner gripper, 1x episode penghentian].
langkah/diskon	Skalar		float32	Diskon jika disediakan, defaultnya adalah 1.
langkah/adalah_pertama	Tensor		bodoh
langkah/adalah_terakhir	Tensor		bodoh
langkah/is_terminal	Tensor		bodoh
langkah/bahasa_embedding	Tensor	(512,)	float32	Penyematan bahasa Kona. Lihat https://tfhub.dev/google/universal-sentence-encoder-large/5
langkah/bahasa_instruksi	Teks		rangkaian	Instruksi Bahasa.
langkah/pengamatan	FiturDict
langkah/pengamatan/gambar	Gambar	(128, 128, 3)	uint8	Pengamatan RGB kamera utama.
langkah/pengamatan/keadaan	Tensor	(4,)	float32	Keadaan robot, terdiri dari [3x sudut sambungan robot/ee pos, 1x posisi gripper].
langkah/hadiah	Skalar		float32	Hadiah jika diberikan, 1 pada langkah terakhir untuk demo.

• Kunci yang diawasi (Lihat dokumen as_supervised ): None

• Gambar ( tfds.show_examples ): Tidak didukung.

• Contoh ( tfds.as_dataframe ):

• Kutipan :

@inproceedings{bahl2023affordances,
  title={Affordances from Human Videos as a Versatile Representation for Robotics},
  author={Bahl, Shikhar and Mendonca, Russell and Chen, Lili and Jain, Unnat and Pathak, Deepak},
  booktitle={CVPR},
  year={2023}
}
@article{mendonca2023structured,
  title={Structured World Models from Human Videos},
  author={Mendonca, Russell and Bahl, Shikhar and Pathak, Deepak},
  journal={CoRL},
  year={2023}
}