OptimizerHook

class torchrl.trainers.OptimizerHook(optimizer: Optimizer, loss_components: Optional[Sequence[str]] = None)

为一个或多个损失组件添加优化器。

参数:

• optimizer (optim.Optimizer) – 要应用于 loss_components 的优化器。

• loss_components (Sequence[str], optional) – 损失 TensorDict 中 optimizer 应该应用于相应值的键。如果省略，优化器将应用于名称以 loss_ 开头的所有组件。

示例

>>> optimizer_hook = OptimizerHook(optimizer, ["loss_actor"])
>>> trainer.register_op("optimizer", optimizer_hook)

register(trainer, name='optimizer') → None

在训练器的默认位置注册 hook。

参数:

• trainer (Trainer) – 必须注册 hook 的训练器。

• name (str) – hook 的名称。

注意

要在默认位置以外的其他位置注册 hook，请使用 register_op()。