RenameTransform¶
- class torchrl.envs.transforms.RenameTransform(in_keys, out_keys, in_keys_inv=None, out_keys_inv=None, create_copy=False)[来源]¶
用于重命名输出 TensorDict(或通过反向键重命名输入 TensorDict)中的条目的转换。
- 参数:
in_keys (NestedKey 序列) – 要重命名的条目。
out_keys (NestedKey 序列) – 重命名后条目的名称。
in_keys_inv (NestedKey 序列, 可选) – 要在输入 TensorDict 中重命名的条目,这些条目将传递给
EnvBase._step()
。out_keys_inv (NestedKey 序列, 可选) – 重命名后输入 TensorDict 中条目的名称。
create_copy (bool, 可选) – 如果
True
,则将复制条目并使用不同的名称,而不是重命名。这允许重命名不可变的条目,例如"reward"
和"done"
。
示例
>>> from torchrl.envs.libs.gym import GymEnv >>> env = TransformedEnv( ... GymEnv("Pendulum-v1"), ... RenameTransform(["observation", ], ["stuff",], create_copy=False), ... ) >>> tensordict = env.rollout(3) >>> print(tensordict) TensorDict( fields={ action: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.float32, is_shared=False), done: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.bool, is_shared=False), next: TensorDict( fields={ done: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.bool, is_shared=False), reward: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.float32, is_shared=False), stuff: Tensor(shape=torch.Size([3, 3]), device=cpu, dtype=torch.float32, is_shared=False)}, batch_size=torch.Size([3]), device=cpu, is_shared=False), stuff: Tensor(shape=torch.Size([3, 3]), device=cpu, dtype=torch.float32, is_shared=False)}, batch_size=torch.Size([3]), device=cpu, is_shared=False) >>> # if the output is also an input, we need to rename if both ways: >>> from torchrl.envs.libs.brax import BraxEnv >>> env = TransformedEnv( ... BraxEnv("fast"), ... RenameTransform(["state"], ["newname"], ["state"], ["newname"]) ... ) >>> _ = env.set_seed(1) >>> tensordict = env.rollout(3) >>> assert "newname" in tensordict.keys() >>> assert "state" not in tensordict.keys()
- forward(tensordict: TensorDictBase) TensorDictBase ¶
读取输入 TensorDict,并为选定的键应用转换。
- transform_input_spec(input_spec: Composite) Composite [来源]¶
转换输入规范,使结果规范与转换映射匹配。
- 参数:
input_spec (TensorSpec) – 转换前的规范
- 返回:
转换后预期的规范
- transform_output_spec(output_spec: Composite) Composite [来源]¶
转换输出规范,使结果规范与转换映射匹配。
此方法通常应保持不变。更改应使用
transform_observation_spec()
、transform_reward_spec()
和transformfull_done_spec()
实现。 :param output_spec: 转换前的规范 :type output_spec: TensorSpec- 返回:
转换后预期的规范