robomimic_ph

  • תיאור :

מערכי הנתונים האנושיים הבקיאים של Robomimic נאספו על ידי מפעיל מיומן אחד באמצעות פלטפורמת RoboTurk (למעט Transport, שבה היו 2 מפעילים מיומנים שעבדו יחד). כל מערך נתונים מורכב מ-200 מסלולים מוצלחים.

לכל משימה שתי גרסאות: אחת עם תצפיות ממדיות נמוכות ( low_dim ), ואחת עם תמונות ( image ).

מערכי הנתונים פועלים לפי פורמט RLDS כדי לייצג שלבים ופרקים.

לְפַצֵל דוגמאות
'train' 200
@inproceedings{robomimic2021,
  title={What Matters in Learning from Offline Human Demonstrations for Robot Manipulation},
  author={Ajay Mandlekar and Danfei Xu and Josiah Wong and Soroush Nasiriany
          and Chen Wang and Rohun Kulkarni and Li Fei-Fei and Silvio Savarese
          and Yuke Zhu and Roberto Mart\'{i}n-Mart\'{i}n},
  booktitle={Conference on Robot Learning},
  year={2021}
}

robomimic_ph/lift_ph_image (תצורת ברירת המחדל)

  • גודל הורדה : 798.43 MiB

  • גודל ערכת נתונים : 114.47 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(10,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(32,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (10,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (32,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/lift_ph_low_dim

  • גודל הורדה : 17.69 MiB

  • גודל מערך נתונים : 8.50 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(10,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(32,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (10,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (32,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/can_ph_image

  • גודל הורדה : 1.87 GiB

  • גודל ערכת נתונים : 474.55 MiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(71,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (71,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/can_ph_low_dim

  • גודל הורדה : 43.38 MiB

  • גודל מערך נתונים : 27.73 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(71,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (71,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/square_ph_image

  • גודל הורדה : 2.42 GiB

  • גודל ערכת נתונים : 401.28 MiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(45,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (45,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/square_ph_low_dim

  • גודל הורדה : 47.69 MiB

  • גודל ערכת נתונים : 29.91 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(45,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (45,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/transport_ph_image

  • גודל הורדה : 15.07 GiB

  • גודל מערך נתונים : 3.64 GiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(14,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(41,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'robot1_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot1_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot1_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot1_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot1_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot1_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_vel': Tensor(shape=(7,), dtype=float64),
            'shouldercamera0_image': Image(shape=(84, 84, 3), dtype=uint8),
            'shouldercamera1_image': Image(shape=(84, 84, 3), dtype=uint8),
        }),
        'reward': float64,
        'states': Tensor(shape=(115,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (14,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (41,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/רובוט1_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט1_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט1_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט1_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט1_עין_ביד_תמונה תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט1_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט1_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט1_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט1_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט1_joint_pos_sin מוֹתֵחַ (7,) לצוף64
steps/observation/robot1_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/מצלמת כתף0_image תמונה (84, 84, 3) uint8
צעדים/תצפית/צילום_כתף1 תמונה (84, 84, 3) uint8
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (115,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/transport_ph_low_dim

  • גודל הורדה : 294.70 MiB

  • גודל ערכת נתונים : 208.05 MiB

  • שמור אוטומטי במטמון ( תיעוד ): רק כאשר shuffle_files=False (רכבת)

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(14,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(41,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'robot1_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot1_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot1_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot1_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot1_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(115,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (14,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (41,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/רובוט1_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט1_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט1_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט1_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט1_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט1_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט1_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט1_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט1_joint_pos_sin מוֹתֵחַ (7,) לצוף64
steps/observation/robot1_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (115,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/tool_hang_ph_image

  • גודל הורדה : 61.96 GiB

  • גודל מערך נתונים : 9.10 GiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(44,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(240, 240, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'sideview_image': Image(shape=(240, 240, 3), dtype=uint8),
        }),
        'reward': float64,
        'states': Tensor(shape=(58,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (44,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (240, 240, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/תמונה_צדדית תמונה (240, 240, 3) uint8
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (58,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/tool_hang_ph_low_dim

  • גודל הורדה : 192.29 MiB

  • גודל מערך נתונים : 121.77 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(44,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(58,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (44,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (58,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool
,

  • תיאור :

מערכי הנתונים האנושיים הבקיאים של Robomimic נאספו על ידי מפעיל מיומן אחד באמצעות פלטפורמת RoboTurk (למעט Transport, שבה היו 2 מפעילים מיומנים שעבדו יחד). כל מערך נתונים מורכב מ-200 מסלולים מוצלחים.

לכל משימה שתי גרסאות: אחת עם תצפיות ממדיות נמוכות ( low_dim ), ואחת עם תמונות ( image ).

מערכי הנתונים פועלים לפי פורמט RLDS כדי לייצג שלבים ופרקים.

לְפַצֵל דוגמאות
'train' 200
@inproceedings{robomimic2021,
  title={What Matters in Learning from Offline Human Demonstrations for Robot Manipulation},
  author={Ajay Mandlekar and Danfei Xu and Josiah Wong and Soroush Nasiriany
          and Chen Wang and Rohun Kulkarni and Li Fei-Fei and Silvio Savarese
          and Yuke Zhu and Roberto Mart\'{i}n-Mart\'{i}n},
  booktitle={Conference on Robot Learning},
  year={2021}
}

robomimic_ph/lift_ph_image (תצורת ברירת המחדל)

  • גודל הורדה : 798.43 MiB

  • גודל ערכת נתונים : 114.47 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(10,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(32,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (10,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (32,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/lift_ph_low_dim

  • גודל הורדה : 17.69 MiB

  • גודל מערך נתונים : 8.50 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(10,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(32,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (10,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (32,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/can_ph_image

  • גודל הורדה : 1.87 GiB

  • גודל ערכת נתונים : 474.55 MiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(71,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (71,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/can_ph_low_dim

  • גודל הורדה : 43.38 MiB

  • גודל מערך נתונים : 27.73 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(71,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (71,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/square_ph_image

  • גודל הורדה : 2.42 GiB

  • גודל ערכת נתונים : 401.28 MiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'agentview_image': Image(shape=(84, 84, 3), dtype=uint8),
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(45,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
steps/observation/agentview_image תמונה (84, 84, 3) uint8
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (45,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/square_ph_low_dim

  • גודל הורדה : 47.69 MiB

  • גודל ערכת נתונים : 29.91 MiB

  • שמור אוטומטי במטמון ( תיעוד ): כן

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(14,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(45,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (14,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (45,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/transport_ph_image

  • גודל הורדה : 15.07 GiB

  • גודל מערך נתונים : 3.64 GiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(14,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(41,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'robot1_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot1_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot1_eye_in_hand_image': Image(shape=(84, 84, 3), dtype=uint8),
            'robot1_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot1_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot1_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_vel': Tensor(shape=(7,), dtype=float64),
            'shouldercamera0_image': Image(shape=(84, 84, 3), dtype=uint8),
            'shouldercamera1_image': Image(shape=(84, 84, 3), dtype=uint8),
        }),
        'reward': float64,
        'states': Tensor(shape=(115,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (14,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (41,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_עין_בתמונה_יד תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/רובוט1_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט1_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט1_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט1_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט1_עין_ביד_תמונה תמונה (84, 84, 3) uint8
צעדים/תצפית/רובוט1_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט1_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט1_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט1_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט1_joint_pos_sin מוֹתֵחַ (7,) לצוף64
steps/observation/robot1_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/מצלמת כתף0_image תמונה (84, 84, 3) uint8
צעדים/תצפית/צילום_כתף1 תמונה (84, 84, 3) uint8
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (115,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/transport_ph_low_dim

  • גודל הורדה : 294.70 MiB

  • גודל ערכת נתונים : 208.05 MiB

  • שמור אוטומטי במטמון ( תיעוד ): רק כאשר shuffle_files=False (רכבת)

  • מבנה תכונה :

FeaturesDict({
    '20_percent': bool,
    '20_percent_train': bool,
    '20_percent_valid': bool,
    '50_percent': bool,
    '50_percent_train': bool,
    '50_percent_valid': bool,
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(14,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(41,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'robot1_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot1_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot1_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot1_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot1_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot1_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot1_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(115,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
20 מוֹתֵחַ bool
רכבת 20_אחוזים מוֹתֵחַ bool
20_אחוזים_תקף מוֹתֵחַ bool
50 אחוזים מוֹתֵחַ bool
רכבת 50_אחוזים מוֹתֵחַ bool
50_אחוזים_תקף מוֹתֵחַ bool
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (14,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון מוֹתֵחַ bool
steps/is_terminal מוֹתֵחַ bool
צעדים/תצפית FeaturesDict
צעדים/תצפית/חפץ מוֹתֵחַ (41,) לצוף64
צעדים/תצפית/רובוט0_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט0_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט0_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט0_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט0_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט0_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט0_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט0_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_pos_sin מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט0_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/תצפית/רובוט1_eef_pos מוֹתֵחַ (3,) לצוף64 עמדת גורם קצה
צעדים/תצפית/רובוט1_eef_quat מוֹתֵחַ (4,) לצוף64 אוריינטציה של גורם קצה
צעדים/תצפית/רובוט1_eef_vel_ang מוֹתֵחַ (3,) לצוף64 מהירות זוויתית של אפקטור קצה
צעדים/תצפית/רובוט1_eef_vel_lin מוֹתֵחַ (3,) לצוף64 מהירות קרטזיאנית של אפקטור קצה
צעדים/תצפית/רובוט1_gripper_qpos מוֹתֵחַ (2,) לצוף64 עמדת האחיזה
צעדים/תצפית/רובוט1_gripper_qvel מוֹתֵחַ (2,) לצוף64 מהירות האחיזה
צעדים/תצפית/רובוט1_joint_pos מוֹתֵחַ (7,) לצוף64 עמדות משותפות 7DOF
צעדים/תצפית/רובוט1_joint_pos_cos מוֹתֵחַ (7,) לצוף64
צעדים/תצפית/רובוט1_joint_pos_sin מוֹתֵחַ (7,) לצוף64
steps/observation/robot1_joint_vel מוֹתֵחַ (7,) לצוף64 מהירויות מפרקים 7DOF
צעדים/פרס מוֹתֵחַ לצוף64
צעדים/מדינות מוֹתֵחַ (115,) לצוף64
רכבת מוֹתֵחַ bool
תָקֵף מוֹתֵחַ bool

robomimic_ph/tool_hang_ph_image

  • גודל הורדה : 61.96 GiB

  • גודל מערך נתונים : 9.10 GiB

  • שמירה אוטומטית במטמון ( תיעוד ): לא

  • מבנה תכונה :

FeaturesDict({
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(44,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_eye_in_hand_image': Image(shape=(240, 240, 3), dtype=uint8),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
            'sideview_image': Image(shape=(240, 240, 3), dtype=uint8),
        }),
        'reward': float64,
        'states': Tensor(shape=(58,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • תיעוד תכונה :
תכונה מעמד צוּרָה Dtype תיאור
FeaturesDict
פרק_מזהה מוֹתֵחַ חוּט
אופק מוֹתֵחַ int32
צעדים מערך נתונים
צעדים/פעולה מוֹתֵחַ (7,) לצוף64
צעדים/הנחה מוֹתֵחַ int32
צעדים/הוא_ראשון מוֹתֵחַ bool
צעדים/הוא_אחרון Tensor bool
steps/is_terminal Tensor bool
steps/observation FeaturesDict
steps/observation/object Tensor (44,) float64
steps/observation/robot0_eef_pos Tensor (3,) float64 End-effector position
steps/observation/robot0_eef_quat Tensor (4,) float64 End-effector orientation
steps/observation/robot0_eef_vel_ang Tensor (3,) float64 End-effector angular velocity
steps/observation/robot0_eef_vel_lin Tensor (3,) float64 End-effector cartesian velocity
steps/observation/robot0_eye_in_hand_image Image (240, 240, 3) uint8
steps/observation/robot0_gripper_qpos Tensor (2,) float64 Gripper position
steps/observation/robot0_gripper_qvel Tensor (2,) float64 Gripper velocity
steps/observation/robot0_joint_pos Tensor (7,) float64 7DOF joint positions
steps/observation/robot0_joint_pos_cos Tensor (7,) float64
steps/observation/robot0_joint_pos_sin Tensor (7,) float64
steps/observation/robot0_joint_vel Tensor (7,) float64 7DOF joint velocities
steps/observation/sideview_image Image (240, 240, 3) uint8
steps/reward Tensor float64
steps/states Tensor (58,) float64
train Tensor bool
valid Tensor bool

robomimic_ph/tool_hang_ph_low_dim

  • Download size : 192.29 MiB

  • Dataset size : 121.77 MiB

  • Auto-cached ( documentation ): Yes

  • Feature structure :

FeaturesDict({
    'episode_id': string,
    'horizon': int32,
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float64),
        'discount': int32,
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': FeaturesDict({
            'object': Tensor(shape=(44,), dtype=float64),
            'robot0_eef_pos': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_quat': Tensor(shape=(4,), dtype=float64),
            'robot0_eef_vel_ang': Tensor(shape=(3,), dtype=float64),
            'robot0_eef_vel_lin': Tensor(shape=(3,), dtype=float64),
            'robot0_gripper_qpos': Tensor(shape=(2,), dtype=float64),
            'robot0_gripper_qvel': Tensor(shape=(2,), dtype=float64),
            'robot0_joint_pos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_cos': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_pos_sin': Tensor(shape=(7,), dtype=float64),
            'robot0_joint_vel': Tensor(shape=(7,), dtype=float64),
        }),
        'reward': float64,
        'states': Tensor(shape=(58,), dtype=float64),
    }),
    'train': bool,
    'valid': bool,
})
  • Feature documentation :
Feature Class Shape Dtype Description
FeaturesDict
episode_id Tensor string
horizon Tensor int32
steps Dataset
steps/action Tensor (7,) float64
steps/discount Tensor int32
steps/is_first Tensor bool
steps/is_last Tensor bool
steps/is_terminal Tensor bool
steps/observation FeaturesDict
steps/observation/object Tensor (44,) float64
steps/observation/robot0_eef_pos Tensor (3,) float64 End-effector position
steps/observation/robot0_eef_quat Tensor (4,) float64 End-effector orientation
steps/observation/robot0_eef_vel_ang Tensor (3,) float64 End-effector angular velocity
steps/observation/robot0_eef_vel_lin Tensor (3,) float64 End-effector cartesian velocity
steps/observation/robot0_gripper_qpos Tensor (2,) float64 Gripper position
steps/observation/robot0_gripper_qvel Tensor (2,) float64 Gripper velocity
steps/observation/robot0_joint_pos Tensor (7,) float64 7DOF joint positions
steps/observation/robot0_joint_pos_cos Tensor (7,) float64
steps/observation/robot0_joint_pos_sin Tensor (7,) float64
steps/observation/robot0_joint_vel Tensor (7,) float64 7DOF joint velocities
steps/reward Tensor float64
steps/states Tensor (58,) float64
train Tensor bool
valid Tensor bool