torch.cuda.memory_allocated

torch.cuda.memory_allocated(device=None)

返回给定设备上张量占用的当前 GPU 内存（以字节为单位）。

参数

device (torch.device 或 int, 可选) – 选择的设备。如果 device 为 None（默认值），则返回当前设备的统计信息，该设备由 current_device() 给出。

返回类型

int

注意

这可能小于 nvidia-smi 中显示的值，因为一些未使用的内存可能由缓存分配器持有，并且需要在 GPU 上创建一些上下文。有关 GPU 内存管理的更多详细信息，请参阅 内存管理。