快捷方式

DeviceCastTransform

class torchrl.envs.transforms.DeviceCastTransform(device, orig_device=None, *, in_keys=None, out_keys=None, in_keys_inv=None, out_keys_inv=None)[源码]

将数据从一个设备移动到另一个设备。

参数:
  • device (torch.device 或等效类型) – 目标设备。

  • orig_device (torch.device 或等效类型) – 源设备。如果未指定且存在父环境,则从父环境中检索。在所有其他情况下,它将保持未指定状态。

关键字参数:
  • in_keys (NestedKey 列表) – 要映射到不同设备的条目列表。默认为 None

  • out_keys (NestedKey 列表) – 映射到设备上的条目的输出名称。默认为 in_keys 的值。

  • in_keys_inv (NestedKey 列表) – 要映射到不同设备的条目列表。in_keys_inv 是基础环境期望的名称。默认为 None

  • out_keys_inv (NestedKey 列表) – 映射到设备上的条目的输出名称。out_keys_inv 是从转换后的环境外部看到的键的名称。默认为 in_keys_inv 的值。

示例

>>> td = TensorDict(
...     {'obs': torch.ones(1, dtype=torch.double),
... }, [], device="cpu:0")
>>> transform = DeviceCastTransform(device=torch.device("cpu:2"))
>>> td = transform(td)
>>> print(td.device)
cpu:2
forward(tensordict: TensorDictBase = None) TensorDictBase[源码]

读取输入 tensordict,并对选定的键应用转换。

transform_action_spec(full_action_spec: Composite) Composite[源码]

转换 action spec,使结果 spec 与转换映射匹配。

参数:

action_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

transform_done_spec(full_done_spec: Composite) Composite[源码]

转换 done spec,使结果 spec 与转换映射匹配。

参数:

done_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

transform_env_device(device)[源码]

转换父环境的设备。

transform_input_spec(input_spec: Composite) Composite[源码]

转换 input spec,使结果 spec 与转换映射匹配。

参数:

input_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

transform_observation_spec(observation_spec: Composite) Composite[源码]

转换 observation spec,使结果 spec 与转换映射匹配。

参数:

observation_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

transform_output_spec(output_spec: Composite) Composite[源码]

转换 output spec,使结果 spec 与转换映射匹配。

通常应保留此方法不变。更改应使用 transform_observation_spec()transform_reward_spec()transform_full_done_spec() 来实现更改。:param output_spec: 转换前的 spec :type output_spec: TensorSpec

返回值:

转换后预期的 spec

transform_reward_spec(full_reward_spec: Composite) Composite[源码]

转换 reward spec,使结果 spec 与转换映射匹配。

参数:

reward_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

transform_state_spec(full_state_spec: Composite) Composite[源码]

转换 state spec,使结果 spec 与转换映射匹配。

参数:

state_spec (TensorSpec) – 转换前的 spec

返回值:

转换后预期的 spec

文档

查阅 PyTorch 的全面开发者文档

查看文档

教程

获取针对初学者和高级开发者的深度教程

查看教程

资源

查找开发资源并获得问题解答

查看资源