快捷方式

swin3d_b

torchvision.models.video.swin3d_b(*, weights: Optional[Swin3D_B_Weights] = None, progress: bool = True, **kwargs: Any) SwinTransformer3d[source]

Video Swin Transformer 构建 swin_base 架构。

参数:
  • weights (Swin3D_B_Weights, optional) – 要使用的预训练权重。有关更多详细信息和可能的值,请参见下方的 Swin3D_B_Weights。默认情况下,不使用预训练权重。

  • progress (bool, optional) – 如果为 True,则向 stderr 显示下载进度条。默认为 True。

  • **kwargs – 传递给 torchvision.models.video.swin_transformer.SwinTransformer 基类的参数。有关此类的更多详细信息,请参阅 源代码

class torchvision.models.video.Swin3D_B_Weights(value)[source]

上面的模型构建器接受以下值作为 weights 参数。Swin3D_B_Weights.DEFAULT 等效于 Swin3D_B_Weights.KINETICS400_V1。您还可以使用字符串,例如 weights='DEFAULT'weights='KINETICS400_V1'

Swin3D_B_Weights.KINETICS400_V1:

权重从论文中移植而来。精度是在视频级别使用参数 frame_rate=15clips_per_video=12clip_len=32 估算的。也可作为 Swin3D_B_Weights.DEFAULT 使用。

acc@1 (在 Kinetics-400 上)

79.427

acc@5 (在 Kinetics-400 上)

94.386

类别

高空绳索下降, 空气鼓, 回答问题, … (省略 397 个)

min_size

height=1, width=1

min_temporal_size

1

recipe

link

num_params

88048984

GFLOPS

140.67

文件大小

364.1 MB

推理转换可在 Swin3D_B_Weights.KINETICS400_V1.transforms 中找到,并执行以下预处理操作:接受批处理的 (B, T, C, H, W) 和单个 (T, C, H, W) 视频帧 torch.Tensor 对象。帧被调整大小为 resize_size=[256],使用 interpolation=InterpolationMode.BILINEAR,然后进行中心裁剪,裁剪大小为 crop_size=[224, 224]。最后,值首先被重新缩放到 [0.0, 1.0],然后使用 mean=[0.485, 0.456, 0.406]std=[0.229, 0.224, 0.225] 进行标准化。最后,输出维度被置换为 (..., C, T, H, W) 张量。

Swin3D_B_Weights.KINETICS400_IMAGENET22K_V1:

权重从论文中移植而来。精度是在视频级别使用参数 frame_rate=15clips_per_video=12clip_len=32 估算的

acc@1 (在 Kinetics-400 上)

81.643

acc@5 (在 Kinetics-400 上)

95.574

类别

高空绳索下降, 空气鼓, 回答问题, … (省略 397 个)

min_size

height=1, width=1

min_temporal_size

1

recipe

link

num_params

88048984

GFLOPS

140.67

文件大小

364.1 MB

推理转换可在 Swin3D_B_Weights.KINETICS400_IMAGENET22K_V1.transforms 中找到,并执行以下预处理操作:接受批处理的 (B, T, C, H, W) 和单个 (T, C, H, W) 视频帧 torch.Tensor 对象。帧被调整大小为 resize_size=[256],使用 interpolation=InterpolationMode.BILINEAR,然后进行中心裁剪,裁剪大小为 crop_size=[224, 224]。最后,值首先被重新缩放到 [0.0, 1.0],然后使用 mean=[0.485, 0.456, 0.406]std=[0.229, 0.224, 0.225] 进行标准化。最后,输出维度被置换为 (..., C, T, H, W) 张量。

文档

访问 PyTorch 的全面开发者文档

查看文档

教程

获取面向初学者和高级开发者的深入教程

查看教程

资源

查找开发资源并获得问题解答

查看资源