SlowFast Networks for Video Recognition
创始人
2025-05-29 16:34:04
0

之前用了基于骨架点的行为识别模型效果不是很好
一种办法是我们重新训练一个类或者用数据集中类少一点的模型
在这里插入图片描述
我们准备尝试slowfast进行,从效果图上可以看出,其实read,run/jog类别的AP并不是很高。
在这里插入图片描述
我们的posec3d模型除了keypoint还有limb模型(RAF),我们看一下PAF实际上是在关键点之间建立的一个向量场,描述一个limb的方向
在这里插入图片描述
我们这里解释一下Spatio-Temporal Action Detection的采样策略(包括slowfast和lowonly)
采样策略需要定义frame_interval和num_clips,这里有两种采样策略
uniform sampling和dense sampling。
dense sampling对frame_interval帧进行采样,最后得到num_clips帧。
uniform samplin将视频分为num_clips个部分,然后每个部分取一帧。
举例说明
假如现在有96帧[1, 96].
Dense strategy : 32x2x1 会选择第1, 3, 5, …, 63 frames.
Uniform strategy :1x1x8 将所有帧分为 [1, 12], [13, 24], [25, 36], [37, 48], …, [85, 96] 然后取第.1, 13, 25, …, 85 frames.

相关内容

热门资讯

中证A500ETF摩根(560... 8月22日,截止午间收盘,中证A500ETF摩根(560530)涨1.19%,报1.106元,成交额...
A500ETF易方达(1593... 8月22日,截止午间收盘,A500ETF易方达(159361)涨1.28%,报1.104元,成交额1...
何小鹏斥资约2.5亿港元增持小... 每经记者|孙磊    每经编辑|裴健如 8月21日晚间,小鹏汽车发布公告称,公司联...
中证500ETF基金(1593... 8月22日,截止午间收盘,中证500ETF基金(159337)涨0.94%,报1.509元,成交额2...
中证A500ETF华安(159... 8月22日,截止午间收盘,中证A500ETF华安(159359)涨1.15%,报1.139元,成交额...
科创AIETF(588790)... 8月22日,截止午间收盘,科创AIETF(588790)涨4.83%,报0.760元,成交额6.98...
创业板50ETF嘉实(1593... 8月22日,截止午间收盘,创业板50ETF嘉实(159373)涨2.61%,报1.296元,成交额1...
港股异动丨航空股大幅走低 中国... 港股航空股大幅下跌,其中,中国国航跌近7%表现最弱,中国东方航空跌近5%,中国南方航空跌超3%,美兰...
电网设备ETF(159326)... 8月22日,截止午间收盘,电网设备ETF(159326)跌0.25%,报1.198元,成交额409....
红利ETF国企(530880)... 8月22日,截止午间收盘,红利ETF国企(530880)跌0.67%,报1.034元,成交额29.0...