基于交叉注意力机制的视频引导机器翻译方法

王麒鼎; 姜舟

首页> 中文期刊> 《电视技术》 >基于交叉注意力机制的视频引导机器翻译方法

基于交叉注意力机制的视频引导机器翻译方法

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

视频引导机器翻译方法的研究随着短视频的盛行而火热。然而,如何从复杂的视频信息中提取关键信息来辅助机器翻译,仍是一个巨大的挑战。针对视频信息筛选困难问题,提出一种用于视频帧和句子匹配的多模态交叉注意网络。该网络通过统一的深度模型对视频帧和句子词的模态间关系和模态内关系进行建模,利用交叉注意模块和时间注意力模块在模态内和模态间的关系建模中约束视频表征,分别在公共数据集Vatex和小规模低资源汉越数据集上取得了一定的提升。实验结果表明,多模态交叉注意网络可以有效提取视频信息,提升视频引导机器翻译性能。

著录项

来源
《电视技术》 |2022年第6期|34-41|共8页
作者
王麒鼎; 姜舟;
展开▼
作者单位

昆明理工大学信息工程与自动化学院;

昆明理工大学云南省人工智能重点实验室;

展开▼
原文格式 PDF
正文语种 chi
中图分类软件工程;
关键词
视频引导机器翻译; 交叉注意力; 时间注意力;

相似文献

中文文献
外文文献
专利

1. 基于注意力引导图卷积网络的中英机器翻译模型 [J] . 韩雪 ,王章辉 ,张涵婷 . 计算机与数字工程 . 2021,第12期
2. 基于交叉注意力机制的多视图项目文本分类方法 [J] . 方正云 ,杨政 ,李丽敏 . 中文信息学报 . 2022,第7期
3. 多注意力机制的藏汉机器翻译方法研究 [J] . 刘赛虎 ,珠杰 . 电脑知识与技术 . 2021,第010期
4. 基于联合注意力机制的篇章级机器翻译 [J] . 李京谕 ,冯洋 . 中文信息学报 . 2019,第12期
5. 短视频视域下大学生价值观引导路径探析——基于引导大学生社会注意力的正向流动 [J] . 韩晶 . 新闻研究导刊 . 2022,第5期
6. 基于注意力机制的视频显著区域提取方法 [C] . 李毅泉 ,须德 ,郎丛妍 . 第十四届计算机辅助设计与图形学学术会议 . 2006
7. 基于注意力机制编解码框架的神经机器翻译方法研究 [A] . 叶绍林 . 2019

基于交叉注意力机制的视频引导机器翻译方法

摘要

著录项

相似文献

相关主题

期刊订阅