首页
用于视频中人体动作检测的时频网络
返回

用于视频中人体动作检测的时频网络

2022-12-19 科技信息 By:佚名
最佳答案视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中...

视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。

通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中的端到端单级网络。

3D-CNN 和 2D-​​CNN 分别用于提取时间和频率特征。然后,将它们与注意力机制融合以获得检测模式。实验证明了所建议的方法相对于其他最先进的模型的优越性。证明了利用频率特征进行动作检测的可行性。

目前,大多数用于视频中人体动作检测的深度学习方法都采用时空特征,然而,它们忽略了频域中的重要特征。在这项工作中,我们提出了一个同时考虑时间和频率特征的端到端网络,称为 TFNet。TFNet有两个分支,一个是由三维卷积神经网络(3D-CNN)构成的时间分支,以图像序列为输入提取时间特征;另一个是频率分支,通过二维卷积神经网络(2D-CNN)从DCT系数中提取频率特征。最后,为了获得动作模式,这两个特征在注意力机制下深度融合。

猜你喜欢
小米销售记录80万Redmi Note 2台12小时

小米销售记录80万Redmi Note 2台12小时

12-19 0 阅读
阿童木棉服(阿童木专卖店)

阿童木棉服(阿童木专卖店)

12-18 0 阅读
自律成就人生读后感(严格自律的王道人生观读后感)

自律成就人生读后感(严格自律的王道人生观读后感)

12-18 0 阅读
魔法学院hxh几集?

魔法学院hxh几集?

01-03 0 阅读
qq邮箱的收信规则(快捷创建收信规则让QQ邮箱听你安排)

qq邮箱的收信规则(快捷创建收信规则让QQ邮箱听你安排)

12-18 0 阅读
下列三部著作成书的先后顺序是诗经论语(下列三部著作成书的先后顺序)

下列三部著作成书的先后顺序是诗经论语(下列三部著作成书的先后顺序)

12-18 0 阅读
热门推荐
到海外婚礼大概多少钱(婚礼花费清单介绍)

到海外婚礼大概多少钱(婚礼花费清单介绍)

04-23 0 阅读
谢道韫咏雪形神兼备下一句(谢道韫咏雪)

谢道韫咏雪形神兼备下一句(谢道韫咏雪)

12-19 0 阅读
先兆流产症状能保住胎儿吗(先兆流产)

先兆流产症状能保住胎儿吗(先兆流产)

12-19 0 阅读
谷歌Pixel63月更新后用户注意到振动强度问题

谷歌Pixel63月更新后用户注意到振动强度问题

12-19 0 阅读
小米路由器4a千兆版评测(小米路由器 功能)

小米路由器4a千兆版评测(小米路由器 功能)

12-18 0 阅读
n系(阻尼系数那个符号怎么读)

n系(阻尼系数那个符号怎么读)

12-19 0 阅读
谁是谁一生的刺(关于谁是谁一生的刺的介绍)

谁是谁一生的刺(关于谁是谁一生的刺的介绍)

12-19 0 阅读
金文是汉字的一种吗

金文是汉字的一种吗

04-23 0 阅读
西式婚礼流程(详细流程如下)

西式婚礼流程(详细流程如下)

04-23 0 阅读
深圳胃思宝胃部检查新体验之大圣磁控胶囊胃镜检查

深圳胃思宝胃部检查新体验之大圣磁控胶囊胃镜检查

12-20 0 阅读