d4rl_adroit_door

  • Açıklama :

D4RL, çevrimdışı pekiştirmeli öğrenim için açık kaynaklı bir kıyaslamadır. Eğitim ve kıyaslama algoritmaları için standartlaştırılmış ortamlar ve veri kümeleri sağlar.

Veri kümeleri, adımları ve bölümleri temsil etmek için RLDS biçimini izler.

@misc{fu2020d4rl,
    title={D4RL: Datasets for Deep Data-Driven Reinforcement Learning},
    author={Justin Fu and Aviral Kumar and Ofir Nachum and George Tucker and Sergey Levine},
    year={2020},
    eprint={2004.07219},
    archivePrefix={arXiv},
    primaryClass={cs.LG}
}

d4rl_adroit_door/v0-human (varsayılan yapılandırma)

  • İndirme boyutu : 2.97 MiB

  • Veri kümesi boyutu : 3.36 MiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Evet

  • bölmeler :

Bölmek örnekler
'train' 50
  • Özellik yapısı :
FeaturesDict({
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float32,
        'infos': FeaturesDict({
            'qpos': Tensor(shape=(30,), dtype=float32),
            'qvel': Tensor(shape=(30,), dtype=float32),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float32),
        'reward': float32,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra32
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/qpos tensör (30,) şamandıra32
adımlar/bilgiler/qvel tensör (30,) şamandıra32
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra32
adımlar/ödül tensör şamandıra32

d4rl_adroit_door/v0 klonlanmış

  • İndirme boyutu : 602.42 MiB

  • Veri kümesi boyutu : 497.47 MiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Hayır

  • bölmeler :

Bölmek örnekler
'train' 6.214
  • Özellik yapısı :
FeaturesDict({
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float64,
        'infos': FeaturesDict({
            'qpos': Tensor(shape=(30,), dtype=float64),
            'qvel': Tensor(shape=(30,), dtype=float64),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float64),
        'reward': float64,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra64
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/qpos tensör (30,) şamandıra64
adımlar/bilgiler/qvel tensör (30,) şamandıra64
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra64
adımlar/ödül tensör şamandıra64

d4rl_adroit_door/v0-uzmanı

  • İndirme boyutu : 511.05 MiB

  • Veri kümesi boyutu : 710.30 MiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Hayır

  • bölmeler :

Bölmek örnekler
'train' 5.000
  • Özellik yapısı :
FeaturesDict({
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float32,
        'infos': FeaturesDict({
            'action_logstd': Tensor(shape=(28,), dtype=float32),
            'action_mean': Tensor(shape=(28,), dtype=float32),
            'qpos': Tensor(shape=(30,), dtype=float32),
            'qvel': Tensor(shape=(30,), dtype=float32),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float32),
        'reward': float32,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra32
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/action_logstd tensör (28,) şamandıra32
adımlar/bilgiler/eylem_mean tensör (28,) şamandıra32
adımlar/bilgiler/qpos tensör (30,) şamandıra32
adımlar/bilgiler/qvel tensör (30,) şamandıra32
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra32
adımlar/ödül tensör şamandıra32

d4rl_adroit_door/v1-insan

  • İndirme boyutu : 2.98 MiB

  • Veri kümesi boyutu : 3.42 MiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Evet

  • bölmeler :

Bölmek örnekler
'train' 25
  • Özellik yapısı :
FeaturesDict({
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float32,
        'infos': FeaturesDict({
            'door_body_pos': Tensor(shape=(3,), dtype=float32),
            'qpos': Tensor(shape=(30,), dtype=float32),
            'qvel': Tensor(shape=(30,), dtype=float32),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float32),
        'reward': float32,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra32
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/door_body_pos tensör (3,) şamandıra32
adımlar/bilgiler/qpos tensör (30,) şamandıra32
adımlar/bilgiler/qvel tensör (30,) şamandıra32
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra32
adımlar/ödül tensör şamandıra32

d4rl_adroit_door/v1-klonlanmış

  • İndirme boyutu : 280.72 MiB

  • Veri kümesi boyutu : 1.85 GiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Hayır

  • bölmeler :

Bölmek örnekler
'train' 4.358
  • Özellik yapısı :
FeaturesDict({
    'algorithm': string,
    'policy': FeaturesDict({
        'fc0': FeaturesDict({
            'bias': Tensor(shape=(256,), dtype=float32),
            'weight': Tensor(shape=(39, 256), dtype=float32),
        }),
        'fc1': FeaturesDict({
            'bias': Tensor(shape=(256,), dtype=float32),
            'weight': Tensor(shape=(256, 256), dtype=float32),
        }),
        'last_fc': FeaturesDict({
            'bias': Tensor(shape=(28,), dtype=float32),
            'weight': Tensor(shape=(256, 28), dtype=float32),
        }),
        'nonlinearity': string,
        'output_distribution': string,
    }),
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float32,
        'infos': FeaturesDict({
            'door_body_pos': Tensor(shape=(3,), dtype=float32),
            'qpos': Tensor(shape=(30,), dtype=float32),
            'qvel': Tensor(shape=(30,), dtype=float32),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float32),
        'reward': float32,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
algoritma tensör sicim
politika ÖzelliklerDict
ilke/fc0 ÖzelliklerDict
politika/fc0/bias tensör (256,) şamandıra32
ilke/fc0/ağırlık tensör (39, 256) şamandıra32
ilke/fc1 ÖzelliklerDict
politika/fc1/önyargı tensör (256,) şamandıra32
ilke/fc1/ağırlık tensör (256, 256) şamandıra32
ilke/last_fc ÖzelliklerDict
politika/last_fc/bias tensör (28,) şamandıra32
ilke/last_fc/ağırlık tensör (256, 28) şamandıra32
ilke/doğrusal olmama tensör sicim
politika/çıktı_dağıtımı tensör sicim
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra32
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/door_body_pos tensör (3,) şamandıra32
adımlar/bilgiler/qpos tensör (30,) şamandıra32
adımlar/bilgiler/qvel tensör (30,) şamandıra32
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra32
adımlar/ödül tensör şamandıra32

d4rl_adroit_door/v1-uzmanı

  • İndirme boyutu : 511.22 MiB

  • Veri kümesi boyutu : 803.48 MiB

  • Otomatik önbelleğe alınmış ( belgeleme ): Hayır

  • bölmeler :

Bölmek örnekler
'train' 5.000
  • Özellik yapısı :
FeaturesDict({
    'algorithm': string,
    'policy': FeaturesDict({
        'fc0': FeaturesDict({
            'bias': Tensor(shape=(32,), dtype=float32),
            'weight': Tensor(shape=(32, 39), dtype=float32),
        }),
        'fc1': FeaturesDict({
            'bias': Tensor(shape=(32,), dtype=float32),
            'weight': Tensor(shape=(32, 32), dtype=float32),
        }),
        'last_fc': FeaturesDict({
            'bias': Tensor(shape=(28,), dtype=float32),
            'weight': Tensor(shape=(28, 32), dtype=float32),
        }),
        'last_fc_log_std': FeaturesDict({
            'bias': Tensor(shape=(28,), dtype=float32),
            'weight': Tensor(shape=(28, 32), dtype=float32),
        }),
        'nonlinearity': string,
        'output_distribution': string,
    }),
    'steps': Dataset({
        'action': Tensor(shape=(28,), dtype=float32),
        'discount': float32,
        'infos': FeaturesDict({
            'action_log_std': Tensor(shape=(28,), dtype=float32),
            'action_mean': Tensor(shape=(28,), dtype=float32),
            'door_body_pos': Tensor(shape=(3,), dtype=float32),
            'qpos': Tensor(shape=(30,), dtype=float32),
            'qvel': Tensor(shape=(30,), dtype=float32),
        }),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'observation': Tensor(shape=(39,), dtype=float32),
        'reward': float32,
    }),
})
  • Özellik belgeleri :
Özellik Sınıf Şekil Dtipi Tanım
ÖzelliklerDict
algoritma tensör sicim
politika ÖzelliklerDict
ilke/fc0 ÖzelliklerDict
politika/fc0/bias tensör (32,) şamandıra32
ilke/fc0/ağırlık tensör (32, 39) şamandıra32
ilke/fc1 ÖzelliklerDict
politika/fc1/önyargı tensör (32,) şamandıra32
ilke/fc1/ağırlık tensör (32, 32) şamandıra32
ilke/last_fc ÖzelliklerDict
politika/last_fc/bias tensör (28,) şamandıra32
ilke/last_fc/ağırlık tensör (28, 32) şamandıra32
ilke/last_fc_log_std ÖzelliklerDict
ilke/last_fc_log_std/bias tensör (28,) şamandıra32
ilke/last_fc_log_std/ağırlık tensör (28, 32) şamandıra32
ilke/doğrusal olmama tensör sicim
politika/çıktı_dağıtımı tensör sicim
adımlar veri kümesi
adımlar/eylem tensör (28,) şamandıra32
adımlar/indirim tensör şamandıra32
adımlar/bilgiler ÖzelliklerDict
adımlar/bilgiler/action_log_std tensör (28,) şamandıra32
adımlar/bilgiler/eylem_mean tensör (28,) şamandıra32
adımlar/bilgiler/door_body_pos tensör (3,) şamandıra32
adımlar/bilgiler/qpos tensör (30,) şamandıra32
adımlar/bilgiler/qvel tensör (30,) şamandıra32
adımlar/ilk_ilk tensör bool
adımlar/is_last tensör bool
adımlar/is_terminali tensör bool
adımlar/gözlem tensör (39,) şamandıra32
adımlar/ödül tensör şamandıra32