SlowFast Networks for Video Recognition
创始人
2025-05-29 16:34:04

之前用了基于骨架点的行为识别模型效果不是很好
一种办法是我们重新训练一个类或者用数据集中类少一点的模型
在这里插入图片描述
我们准备尝试slowfast进行,从效果图上可以看出,其实read,run/jog类别的AP并不是很高。
在这里插入图片描述
我们的posec3d模型除了keypoint还有limb模型(RAF),我们看一下PAF实际上是在关键点之间建立的一个向量场,描述一个limb的方向
在这里插入图片描述
我们这里解释一下Spatio-Temporal Action Detection的采样策略(包括slowfast和lowonly)
采样策略需要定义frame_interval和num_clips,这里有两种采样策略
uniform sampling和dense sampling。
dense sampling对frame_interval帧进行采样,最后得到num_clips帧。
uniform samplin将视频分为num_clips个部分,然后每个部分取一帧。
举例说明
假如现在有96帧[1, 96].
Dense strategy : 32x2x1 会选择第1, 3, 5, …, 63 frames.
Uniform strategy :1x1x8 将所有帧分为 [1, 12], [13, 24], [25, 36], [37, 48], …, [85, 96] 然后取第.1, 13, 25, …, 85 frames.

相关内容

热门资讯

用微妙的爱 呈现大地上的座座孤... 来源:北京青年报 《社火》系列 草地里的夜光龙 《三姐妹》 张晓 2019年◎后商 展览:八仙过海 ...
华润微2025交卷IDM优势正...   炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! (来源:爱集微)【编...
宏达电子跌2.00%,成交额1... 2月13日,宏达电子盘中下跌2.00%,截至11:15,报49.44元/股,成交1.45亿元,换手率...
振芯科技股价跌5.02%,长信... 2月13日,振芯科技跌5.02%,截至发稿,报27.24元/股,成交4.78亿元,换手率3.06%,...
共享汽车板块走强 千里科技涨停   02月13日消息,截止11:16,共享汽车板块走强,千里科技涨停。  声明:市场有风险,投资需谨...