SlowFast Networks for Video Recognition
创始人
2025-05-29 16:34:04

之前用了基于骨架点的行为识别模型效果不是很好
一种办法是我们重新训练一个类或者用数据集中类少一点的模型
在这里插入图片描述
我们准备尝试slowfast进行,从效果图上可以看出,其实read,run/jog类别的AP并不是很高。
在这里插入图片描述
我们的posec3d模型除了keypoint还有limb模型(RAF),我们看一下PAF实际上是在关键点之间建立的一个向量场,描述一个limb的方向
在这里插入图片描述
我们这里解释一下Spatio-Temporal Action Detection的采样策略(包括slowfast和lowonly)
采样策略需要定义frame_interval和num_clips,这里有两种采样策略
uniform sampling和dense sampling。
dense sampling对frame_interval帧进行采样,最后得到num_clips帧。
uniform samplin将视频分为num_clips个部分,然后每个部分取一帧。
举例说明
假如现在有96帧[1, 96].
Dense strategy : 32x2x1 会选择第1, 3, 5, …, 63 frames.
Uniform strategy :1x1x8 将所有帧分为 [1, 12], [13, 24], [25, 36], [37, 48], …, [85, 96] 然后取第.1, 13, 25, …, 85 frames.

相关内容

热门资讯

云龙天池国家级自然保护区入选世... 转自:云南日报记者近日从云龙天池国家级自然保护区获悉,该保护区正式入选世界自然保护联盟绿色名录,成为...
芒果干里的“暖心账”​ 我 为 群 众 办 实 事我是楚雄彝族自治州楚雄市八角镇大麦地村委会泥期苴小组的鲁晓玲。天还没亮,新...
在亲戚借条上签名被判连带清偿责...   三湘都市报12月14日讯  欠钱逾期未还,双方公堂对簿,竟因借据上的“担保人”“连带担保人”起了...
学分能换“高级工”证书?湖南暂...   毕业就能拿到“高级工”的技能证书,实现“毕业即持证”,这是种什么样的体验?近日,安徽皖江工学院土...
长赣高铁湖南段首座隧道进洞施工     12月13日,位于浏阳市荷花街道和澄潭江镇的长赣高铁湖南段首座隧道——苏家庵隧道正式进洞。 ...