快捷方式

s3d

torchvision.models.video.s3d(\*, weights: Optional[S3D_Weights] = None, progress: bool = True, **kwargs: Any) S3D[原始碼]

構造可分離 3D 卷積模型。

參考文獻: 重新思考時空特徵學習

警告

The video module is in Beta stage, and backward compatibility is not guaranteed.

引數:
  • weights (S3D_Weights, 可選) – 要使用的預訓練權重。有關更多詳細資訊和可能值,請參閱下面的 S3D_Weights。預設情況下,不使用預訓練權重。

  • progress (bool) – 如果為 True,則在 stderr 上顯示下載進度條。預設為 True。

  • **kwargs – 傳遞給 torchvision.models.video.S3D 基類的引數。有關此類的更多詳細資訊,請參閱 原始碼

class torchvision.models.video.S3D_Weights(value)[原始碼]

上面的模型構建器接受以下值作為 weights 引數。 S3D_Weights.DEFAULT 等同於 S3D_Weights.KINETICS400_V1。您也可以使用字串,例如 weights='DEFAULT'weights='KINETICS400_V1'

S3D_Weights.KINETICS400_V1:

這些權重旨在接近論文中的準確度。準確度是在剪輯級別使用引數 frame_rate=15clips_per_video=1clip_len=128 來估算的。也可用作 S3D_Weights.DEFAULT

acc@1(在 Kinetics-400 上)

68.368

acc@5(在 Kinetics-400 上)

88.05

min_size

height=224, width=224

min_temporal_size

14

類別

abseiling, air drumming, answering questions, … (省略397項)

方案

連結

引數數量

8320048

GFLOPS

17.98

檔案大小

32.0 MB

推理轉換可在 S3D_Weights.KINETICS400_V1.transforms 處獲得,並執行以下預處理操作:接受批次 (B, T, C, H, W) 和單個 (T, C, H, W) 影片幀 torch.Tensor 物件。使用 interpolation=InterpolationMode.BILINEAR 將幀調整為 resize_size=[256, 256],然後進行中心裁剪 crop_size=[224, 224]。最後,將值首先縮放到 [0.0, 1.0],然後使用 mean=[0.43216, 0.394666, 0.37645]std=[0.22803, 0.22145, 0.216989] 進行歸一化。最後,將輸出維度置換為 (..., C, T, H, W) 張量。

文件

訪問全面的 PyTorch 開發者文件

檢視文件

教程

為初學者和高階開發者提供深入的教程

檢視教程

資源

查詢開發資源並讓您的問題得到解答

檢視資源