MRTP:时间-动作感知的多尺度时间序列实时行为识别方法

张坤; 杨静; 张栋; 陈跃海; 李杰; 杜少毅

首页> 中文期刊> 《西安交通大学学报》 >MRTP:时间-动作感知的多尺度时间序列实时行为识别方法

MRTP:时间-动作感知的多尺度时间序列实时行为识别方法

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

针对行为识别中时空信息分布不均衡以及对长时间跨度信息表征获取难的问题,提出了一种时间-动作感知的多尺度时间序列实时行为识别方法MRTP。以RGB视频为输入,使用两个并行的感知路径在不同的时间分辨率上对视频进行空间特征与动作特征提取。在空间路径中,使用基于特征差分的动作感知寻找并加强通道动作特征表征;在动作路径中,基于动作感知的权重对通道进行筛选,并加入通道注意力和时间注意力加强关键特征;在两个路径提取出特征后,对特征进行融合,融合后的特征通过激活函数映射出样本在各个类别的得分,取得分最高的类别为最终识别结果。实验结果表明:所提方法在UCF101数据集上达到了95.6%的准确率,优于未使用时间注意力的方法;在AVA2.2数据集上的平均精度达到了28%,优于未使用动作感知和时间注意力的方法。与目前主流的基于光流法的双流网络、以Slowfast为代表的3D卷积网络、Transformer等方法进行了准确率、参数量、处理速度对比,结果表明所提方法具有更良好的识别效果和鲁棒性。

著录项

来源
《西安交通大学学报》 |2022年第3期|22-32|共11页
作者
张坤; 杨静; 张栋; 陈跃海; 李杰; 杜少毅;
展开▼
作者单位

西安交通大学自动化科学与工程学院;

西安交通大学人工智能学院;

展开▼
原文格式 PDF
正文语种 chi
中图分类模式识别与装置;
关键词
行为识别; 双路径网络; 特征差分; 动作感知; 时间注意力;

相似文献

中文文献
外文文献
专利

1. 融合时间序列与多尺度特征的虚假评论识别方法 [J] . 狄瑞彤 ,王红 ,房有丽 . 计算机工程 . 2019,第003期
2. 基于多元时间序列融合的飞行动作识别方法 [J] . 周超 ,樊蓉 ,张戈 . 空军工程大学学报（自然科学版） . 2017,第004期
3. 基于YOLOv5视觉感知的实时叉车驾驶操作行为识别方法 [J] . 陈友升 ,周介祺 ,梁敏健 . 自动化与信息工程 . 2021,第003期
4. 多时间尺度时间序列趋势预测 [J] . 王金策 ,邓越萍 ,史明 . 计算机应用 . 2019,第004期
5. 长时间尺度风电出力时间序列建模新方法研究 [J] . 刘纯 ,吕振华 ,黄越辉 . 电力系统保护与控制 . 2013,第001期
6. 基于时间序列分析的杀手级任务在线识别方法 [C] . TANG Hong-Yan ,唐红艳 ,LI Ying . 第十四届全国软件与应用学术会议 . 2015
7. 基于时间多尺度的行为识别方法 [A] . 李旺 . 2019

MRTP:时间-动作感知的多尺度时间序列实时行为识别方法

摘要

著录项

相似文献

相关主题

期刊订阅