首页
用于视频中人体动作检测的时频网络
返回

用于视频中人体动作检测的时频网络

2022-12-19 科技信息 By:佚名
最佳答案视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中...

视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。

通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中的端到端单级网络。

3D-CNN 和 2D-​​CNN 分别用于提取时间和频率特征。然后,将它们与注意力机制融合以获得检测模式。实验证明了所建议的方法相对于其他最先进的模型的优越性。证明了利用频率特征进行动作检测的可行性。

目前,大多数用于视频中人体动作检测的深度学习方法都采用时空特征,然而,它们忽略了频域中的重要特征。在这项工作中,我们提出了一个同时考虑时间和频率特征的端到端网络,称为 TFNet。TFNet有两个分支,一个是由三维卷积神经网络(3D-CNN)构成的时间分支,以图像序列为输入提取时间特征;另一个是频率分支,通过二维卷积神经网络(2D-CNN)从DCT系数中提取频率特征。最后,为了获得动作模式,这两个特征在注意力机制下深度融合。

猜你喜欢
海南大学图书馆官网入口(海南大学图书馆官网)

海南大学图书馆官网入口(海南大学图书馆官网)

12-18 0 阅读
蝴蝶的一生故事(蝴蝶的一生)

蝴蝶的一生故事(蝴蝶的一生)

12-18 0 阅读
万家邀明月一起过中秋(关于万家邀明月一起过中秋的介绍)

万家邀明月一起过中秋(关于万家邀明月一起过中秋的介绍)

12-19 0 阅读
情侣图标可以隐藏吗(怎么隐藏情侣图标)

情侣图标可以隐藏吗(怎么隐藏情侣图标)

12-18 0 阅读
山东艺术学院2022艺术类录取分数线(艺术类录取分数线)

山东艺术学院2022艺术类录取分数线(艺术类录取分数线)

12-18 0 阅读
快手沾沾卡如何使用(快手沾沾卡怎么用)

快手沾沾卡如何使用(快手沾沾卡怎么用)

12-18 0 阅读
热门推荐
用了苦参凝胶排出豆腐渣是什么东西图片(用了苦参凝胶排出豆腐渣是什么东西)

用了苦参凝胶排出豆腐渣是什么东西图片(用了苦参凝胶排出豆腐渣是什么东西)

12-18 0 阅读
气动加油泵(关于气动加油泵的介绍)

气动加油泵(关于气动加油泵的介绍)

12-19 0 阅读
证件照扫描件是什么格式的(谁知道证件扫描件怎么弄格式吗)

证件照扫描件是什么格式的(谁知道证件扫描件怎么弄格式吗)

12-19 0 阅读
过敏原检查需要多少钱(过敏原筛查多少钱)

过敏原检查需要多少钱(过敏原筛查多少钱)

12-19 0 阅读
iphone4固件下载(iphone4下载固件后无法恢复显示所请求版本不适用于本设备)

iphone4固件下载(iphone4下载固件后无法恢复显示所请求版本不适用于本设备)

12-18 0 阅读
多菌灵可以用来土壤消毒吗(多菌灵土壤消毒)

多菌灵可以用来土壤消毒吗(多菌灵土壤消毒)

12-18 0 阅读
形容一去不复返的成语词语(形容一去不复返的成语)

形容一去不复返的成语词语(形容一去不复返的成语)

12-18 0 阅读
如何将文件压缩打包好发QQ邮件(如何将文件压缩打包)

如何将文件压缩打包好发QQ邮件(如何将文件压缩打包)

12-18 0 阅读
地质勘察的任务与内容(工程地质勘察的任务是什么)

地质勘察的任务与内容(工程地质勘察的任务是什么)

12-18 0 阅读
光纤网线断了怎么接线(光纤线断了土接法线图)

光纤网线断了怎么接线(光纤线断了土接法线图)

12-18 0 阅读