基于时-空特征的全卷积网络用于视频人眼关注预测的研究

史久琛; 孙美君; 王征; 张冬

首页> 中文期刊> 《天津大学学报：自然科学与工程技术版》 >基于时-空特征的全卷积网络用于视频人眼关注预测的研究

基于时-空特征的全卷积网络用于视频人眼关注预测的研究

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

视频人眼关注预测是在视频中标注能够吸引人眼关注的感兴趣显著区域,对于自动提取大量视频的语义信息有着重要的应用.该研究从目前显著性处理主流算法全卷积网络的局限性出发,提出了一种基于时间-空间特征的深度学习模型用于预测视频中的人眼关注区域.首先,采用全卷积网络提取视频帧图像的空间特征,光流方法用于提取相邻帧之间的时间运动特征,通过长短期记忆网络处理当前帧与其前 6 帧的空间特征与时间特征,得到最终的人眼关注区域预测图.使用INB 和IVB 两个人眼关注视频数据库进行计算.实验结果表明,在地球移动距离、受试者工作特征曲线下面积、标准化扫描路径显著性、线性相关性等 4 个性能评估标准分别取得了 0.375 1、0.818 6、2.024 1、0.745 7 和 0.413 7、0.785 6、1.964 5、0.734 9 的结果,预测性能优于 5 种对比算法,表明本文方法在视频人眼关注预测上能够取得较准确的结果.

著录项

来源
《天津大学学报：自然科学与工程技术版》 |2019年第10期|1062-1068|共7页
作者
史久琛; 孙美君; 王征; 张冬;
展开▼
作者单位

上海交通大学电子信息与电气工程学院;

上海;

200240;

天津大学智能与计算学部;

天津300072;

天津中医药大学中医药研究院;

天津300193;

展开▼
原文格式 PDF
正文语种 chi
中图分类多媒体技术与多媒体计算机;
关键词
视频; 人眼关注; 时空特征; 全卷积网络; 光流; 长短期记忆网络;

相似文献

中文文献
外文文献
专利

1. 基于时空双流全卷积网络的视频目标分割算法研究及改进 [J] . 邓志新 ,洪泓 ,金一 . 工业控制计算机 . 2018,第008期
2. 多特征全卷积网络的地空通话语音增强方法 [J] . 高登峰 ,杨波 ,刘洪 . 四川大学学报（自然科学版） . 2020,第002期
3. 一种基于空-时快速鲁棒特征的视频词汇的人行为识别方法 [J] . 冯冰 ,蒋兴浩 ,孙锬锋 . 上海交通大学学报 . 2011,第2期
4. 基于改进区域全卷积网络的高压引线接头红外图像特征分析的在线故障诊断方法 [J] . 徐奇伟 ,黄宏 ,张雪锋 . 电工技术学报 . 2021,第007期
5. 基于特征交互与卷积网络的渔场预测模型 [J] . 袁红春 ,王敏 ,刘慧 . 江苏农业学报 . 2021,第6期
6. 一种用于视频编码的块特征匹配预测搜索算法 [C] . 骆立俊 . 1997年中国神经计算科学大会 . 1997
7. 基于时-空-内容特征的PTZ相机监控视频数据组织与检索 [A] . 崔倩 . 2016

基于时-空特征的全卷积网络用于视频人眼关注预测的研究

摘要

著录项

相似文献

相关主题

期刊订阅