- 설명 :
D4RL은 오프라인 강화 학습을 위한 오픈 소스 벤치마크입니다. 이는 훈련 및 벤치마킹 알고리즘을 위한 표준화된 환경과 데이터세트를 제공합니다.
데이터 세트는 RLDS 형식을 따라 단계와 에피소드를 나타냅니다.
구성 설명 : https://github.com/rail-berkeley/d4rl/wiki/Tasks#gym 에서 작업 및 해당 버전에 대한 자세한 내용을 확인하세요.
버전 :
-
1.0.0
: 최초 릴리스. -
1.1.0
: is_last가 추가되었습니다. -
1.2.0
(기본값): 다음 관찰을 고려하도록 업데이트되었습니다.
-
감독되는 키 (
as_supervised
doc 참조):None
그림 ( tfds.show_examples ): 지원되지 않습니다.
인용 :
@misc{fu2020d4rl,
title={D4RL: Datasets for Deep Data-Driven Reinforcement Learning},
author={Justin Fu and Aviral Kumar and Ofir Nachum and George Tucker and Sergey Levine},
year={2020},
eprint={2004.07219},
archivePrefix={arXiv},
primaryClass={cs.LG}
}
d4rl_mujoco_ant/v0-expert (기본 구성)
다운로드 크기 :
131.34 MiB
데이터세트 크기 :
464.94 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,288 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v0-medium
다운로드 크기 :
131.39 MiB
데이터세트 크기 :
464.78 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,122 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v0-medium-expert
다운로드 크기 :
262.73 MiB
데이터세트 크기 :
929.71 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 2,410 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v0-혼합
다운로드 크기 :
104.63 MiB
데이터세트 크기 :
464.93 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,320 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v0-random
다운로드 크기 :
139.50 MiB
데이터세트 크기 :
464.97 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,377 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-전문가
다운로드 크기 :
220.72 MiB
데이터세트 크기 :
968.63 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,033 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'policy': FeaturesDict({
'fc0': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 111), dtype=float32),
}),
'fc1': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 256), dtype=float32),
}),
'last_fc': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'last_fc_log_std': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'nonlinearity': string,
'output_distribution': string,
}),
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float32,
'qpos': Tensor(shape=(15,), dtype=float32),
'qvel': Tensor(shape=(14,), dtype=float32),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
정책 | 특징Dict | |||
정책/fc0 | 특징Dict | |||
정책/fc0/편향 | 텐서 | (256,) | float32 | |
정책/fc0/가중치 | 텐서 | (256, 111) | float32 | |
정책/fc1 | 특징Dict | |||
정책/fc1/편향 | 텐서 | (256,) | float32 | |
정책/fc1/가중치 | 텐서 | (256, 256) | float32 | |
정책/last_fc | 특징Dict | |||
정책/last_fc/bias | 텐서 | (8,) | float32 | |
정책/last_fc/체중 | 텐서 | (8, 256) | float32 | |
정책/last_fc_log_std | 특징Dict | |||
정책/last_fc_log_std/bias | 텐서 | (8,) | float32 | |
정책/last_fc_log_std/weight | 텐서 | (8, 256) | float32 | |
정책/비선형성 | 텐서 | 끈 | ||
정책/출력_배포 | 텐서 | 끈 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float32 | ||
단계/정보/qpos | 텐서 | (15,) | float32 | |
단계/정보/qvel | 텐서 | (14,) | float32 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-medium
다운로드 크기 :
222.39 MiB
데이터세트 크기 :
1023.71 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,179 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'policy': FeaturesDict({
'fc0': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 111), dtype=float32),
}),
'fc1': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 256), dtype=float32),
}),
'last_fc': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'last_fc_log_std': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'nonlinearity': string,
'output_distribution': string,
}),
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float32,
'qpos': Tensor(shape=(15,), dtype=float32),
'qvel': Tensor(shape=(14,), dtype=float32),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
정책 | 특징Dict | |||
정책/fc0 | 특징Dict | |||
정책/fc0/편향 | 텐서 | (256,) | float32 | |
정책/fc0/가중치 | 텐서 | (256, 111) | float32 | |
정책/fc1 | 특징Dict | |||
정책/fc1/편향 | 텐서 | (256,) | float32 | |
정책/fc1/가중치 | 텐서 | (256, 256) | float32 | |
정책/last_fc | 특징Dict | |||
정책/last_fc/bias | 텐서 | (8,) | float32 | |
정책/last_fc/체중 | 텐서 | (8, 256) | float32 | |
정책/last_fc_log_std | 특징Dict | |||
정책/last_fc_log_std/bias | 텐서 | (8,) | float32 | |
정책/last_fc_log_std/weight | 텐서 | (8, 256) | float32 | |
정책/비선형성 | 텐서 | 끈 | ||
정책/출력_배포 | 텐서 | 끈 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float32 | ||
단계/정보/qpos | 텐서 | (15,) | float32 | |
단계/정보/qvel | 텐서 | (14,) | float32 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-medium-expert
다운로드 크기 :
442.25 MiB
데이터세트 크기 :
1.13 GiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 2,211 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float32,
'qpos': Tensor(shape=(15,), dtype=float32),
'qvel': Tensor(shape=(14,), dtype=float32),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float32 | ||
단계/정보/qpos | 텐서 | (15,) | float32 | |
단계/정보/qvel | 텐서 | (14,) | float32 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-medium-replay
다운로드 크기 :
132.05 MiB
데이터세트 크기 :
175.27 MiB
자동 캐시 ( 문서 ):
shuffle_files=False
인 경우에만(학습)분할 :
나뉘다 | 예 |
---|---|
'train' | 485 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float64),
'discount': float64,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float64),
'reward': float64,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float64 | |
걸음수/할인 | 텐서 | float64 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float64 | |
걸음수/보상 | 텐서 | float64 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-전체 재생
다운로드 크기 :
437.57 MiB
데이터세트 크기 :
580.09 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,319 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float64),
'discount': float64,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float64),
'reward': float64,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float64 | |
걸음수/할인 | 텐서 | float64 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float64 | |
걸음수/보상 | 텐서 | float64 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v1-random
다운로드 크기 :
225.18 MiB
데이터세트 크기 :
583.83 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 5,741 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float32,
'qpos': Tensor(shape=(15,), dtype=float32),
'qvel': Tensor(shape=(14,), dtype=float32),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float32 | ||
단계/정보/qpos | 텐서 | (15,) | float32 | |
단계/정보/qvel | 텐서 | (14,) | float32 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-전문가
다운로드 크기 :
355.94 MiB
데이터세트 크기 :
969.38 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,035 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'policy': FeaturesDict({
'fc0': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 111), dtype=float32),
}),
'fc1': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 256), dtype=float32),
}),
'last_fc': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'last_fc_log_std': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'nonlinearity': string,
'output_distribution': string,
}),
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
정책 | 특징Dict | |||
정책/fc0 | 특징Dict | |||
정책/fc0/편향 | 텐서 | (256,) | float32 | |
정책/fc0/가중치 | 텐서 | (256, 111) | float32 | |
정책/fc1 | 특징Dict | |||
정책/fc1/편향 | 텐서 | (256,) | float32 | |
정책/fc1/가중치 | 텐서 | (256, 256) | float32 | |
정책/last_fc | 특징Dict | |||
정책/last_fc/bias | 텐서 | (8,) | float32 | |
정책/last_fc/체중 | 텐서 | (8, 256) | float32 | |
정책/last_fc_log_std | 특징Dict | |||
정책/last_fc_log_std/bias | 텐서 | (8,) | float32 | |
정책/last_fc_log_std/weight | 텐서 | (8, 256) | float32 | |
정책/비선형성 | 텐서 | 끈 | ||
정책/출력_배포 | 텐서 | 끈 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-전체 재생
다운로드 크기 :
428.57 MiB
데이터세트 크기 :
580.09 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,319 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-medium
다운로드 크기 :
358.81 MiB
데이터세트 크기 :
1.01 GiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,203 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'policy': FeaturesDict({
'fc0': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 111), dtype=float32),
}),
'fc1': FeaturesDict({
'bias': Tensor(shape=(256,), dtype=float32),
'weight': Tensor(shape=(256, 256), dtype=float32),
}),
'last_fc': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'last_fc_log_std': FeaturesDict({
'bias': Tensor(shape=(8,), dtype=float32),
'weight': Tensor(shape=(8, 256), dtype=float32),
}),
'nonlinearity': string,
'output_distribution': string,
}),
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
정책 | 특징Dict | |||
정책/fc0 | 특징Dict | |||
정책/fc0/편향 | 텐서 | (256,) | float32 | |
정책/fc0/가중치 | 텐서 | (256, 111) | float32 | |
정책/fc1 | 특징Dict | |||
정책/fc1/편향 | 텐서 | (256,) | float32 | |
정책/fc1/가중치 | 텐서 | (256, 256) | float32 | |
정책/last_fc | 특징Dict | |||
정책/last_fc/bias | 텐서 | (8,) | float32 | |
정책/last_fc/체중 | 텐서 | (8, 256) | float32 | |
정책/last_fc_log_std | 특징Dict | |||
정책/last_fc_log_std/bias | 텐서 | (8,) | float32 | |
정책/last_fc_log_std/weight | 텐서 | (8, 256) | float32 | |
정책/비선형성 | 텐서 | 끈 | ||
정책/출력_배포 | 텐서 | 끈 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-medium-expert
다운로드 크기 :
713.67 MiB
데이터세트 크기 :
1.13 GiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 2,237 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-medium-replay
다운로드 크기 :
130.16 MiB
데이터세트 크기 :
175.27 MiB
자동 캐시 ( 문서 ):
shuffle_files=False
인 경우에만(학습)분할 :
나뉘다 | 예 |
---|---|
'train' | 485 |
- 기능 구조 :
FeaturesDict({
'algorithm': string,
'iteration': int32,
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
연산 | 텐서 | 끈 | ||
반복 | 텐서 | 정수32 | ||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):
d4rl_mujoco_ant/v2-random
다운로드 크기 :
366.66 MiB
데이터세트 크기 :
583.90 MiB
자동 캐시 ( 문서 ): 아니요
분할 :
나뉘다 | 예 |
---|---|
'train' | 5,822 |
- 기능 구조 :
FeaturesDict({
'steps': Dataset({
'action': Tensor(shape=(8,), dtype=float32),
'discount': float32,
'infos': FeaturesDict({
'action_log_probs': float64,
'qpos': Tensor(shape=(15,), dtype=float64),
'qvel': Tensor(shape=(14,), dtype=float64),
}),
'is_first': bool,
'is_last': bool,
'is_terminal': bool,
'observation': Tensor(shape=(111,), dtype=float32),
'reward': float32,
}),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
단계 | 데이터세트 | |||
단계/작업 | 텐서 | (8,) | float32 | |
걸음수/할인 | 텐서 | float32 | ||
단계/정보 | 특징Dict | |||
단계/정보/action_log_probs | 텐서 | float64 | ||
단계/정보/qpos | 텐서 | (15,) | float64 | |
단계/정보/qvel | 텐서 | (14,) | float64 | |
걸음수/is_first | 텐서 | 부울 | ||
걸음수/is_last | 텐서 | 부울 | ||
단계/is_terminal | 텐서 | 부울 | ||
단계/관찰 | 텐서 | (111,) | float32 | |
걸음수/보상 | 텐서 | float32 |
- 예 ( tfds.as_dataframe ):