快捷方式

RenameTransform

class torchrl.envs.transforms.RenameTransform(in_keys, out_keys, in_keys_inv=None, out_keys_inv=None, create_copy=False)[源代码]

用于重命名输出 tensordict 中条目的转换。

参数:
  • in_keys (NestedKey 序列) – 要重命名的条目

  • out_keys (NestedKey 序列) – 重命名后条目的名称。

  • in_keys_inv (NestedKey 序列, 可选) – 在将输入 tensordict 传递给 EnvBase._step() 之前要重命名的条目。

  • out_keys_inv (NestedKey 序列, 可选) – 传递给 EnvBase._step() 的重命名条目的名称。

  • create_copy (布尔值, 可选) – 如果为 True,则条目将使用不同的名称进行复制,而不是重命名。这允许重命名不可变条目,例如 "reward""done"

示例

>>> from torchrl.envs.libs.gym import GymEnv
>>> env = TransformedEnv(
...     GymEnv("Pendulum-v1"),
...     RenameTransform(["observation", ], ["stuff",], create_copy=False),
... )
>>> tensordict = env.rollout(3)
>>> print(tensordict)
TensorDict(
    fields={
        action: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.float32, is_shared=False),
        done: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.bool, is_shared=False),
        next: TensorDict(
            fields={
                done: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.bool, is_shared=False),
                reward: Tensor(shape=torch.Size([3, 1]), device=cpu, dtype=torch.float32, is_shared=False),
                stuff: Tensor(shape=torch.Size([3, 3]), device=cpu, dtype=torch.float32, is_shared=False)},
            batch_size=torch.Size([3]),
            device=cpu,
            is_shared=False),
        stuff: Tensor(shape=torch.Size([3, 3]), device=cpu, dtype=torch.float32, is_shared=False)},
    batch_size=torch.Size([3]),
    device=cpu,
    is_shared=False)
>>> # if the output is also an input, we need to rename if both ways:
>>> from torchrl.envs.libs.brax import BraxEnv
>>> env = TransformedEnv(
...     BraxEnv("fast"),
...     RenameTransform(["state"], ["newname"], ["state"], ["newname"])
... )
>>> _ = env.set_seed(1)
>>> tensordict = env.rollout(3)
>>> assert "newname" in tensordict.keys()
>>> assert "state" not in tensordict.keys()
forward(tensordict: TensorDictBase) TensorDictBase

读取输入 tensordict,并对选定的键应用转换。

transform_input_spec(input_spec: CompositeSpec) CompositeSpec[源代码]

转换输入规范,以便生成的规范与转换映射匹配。

参数:

input_spec (TensorSpec) – 转换前的规范

返回值:

转换后的预期规范

transform_output_spec(output_spec: CompositeSpec) CompositeSpec[源代码]

转换输出规范,以便生成的规范与转换映射匹配。

此方法通常应保持不变。更改应使用 transform_observation_spec()transform_reward_spec()transformfull_done_spec() 实现。:param output_spec: 转换前的规范 :type output_spec: TensorSpec

返回值:

转换后的预期规范

文档

访问 PyTorch 的全面开发者文档

查看文档

教程

获取针对初学者和高级开发人员的深入教程

查看教程

资源

查找开发资源并获得问题的解答

查看资源