首页> 中国专利> 基于感知语法知识的视频描述生成方法

基于感知语法知识的视频描述生成方法

页面导航

摘要
著录项
法律信息
相似文献

摘要

本发明属于计算机视觉技术领域，具体为一种基于感知语法知识的树结构视频描述生成方法。本发明显式利用语言中存在的语义信息，使用依存结构分析工具将顺序结构的句子转换成语法树的结构，通过树之间父结点和子结点之间的连接关系，对句子当中的依存语法结构进行显式建模；通过感知上下文的注意力网络，对生成过程中所产生的不同路径上下文信息分别进行建模；同时，在训练阶段引入强化学习和迭代式生成的训练方式，进一步提高模型性能；本发明通过定性和定量实验,表明模型具有可生成更加准确、语义更加丰富描述的能力。

著录项

公开/公告号CN115410120A

专利类型发明专利
公开/公告日2022-11-29

原文格式PDF
申请/专利权人复旦大学;
展开▼

申请/专利号CN202210970842.4
发明设计人张玥杰;郑逸;景和明;
展开▼

申请日2022-08-13
分类号G06V20/40;G06N3/04;G06N3/08;G06V10/774;G06V10/82;
代理机构上海正旦专利代理有限公司;
代理人陆飞;陆尤
地址 200433 上海市杨浦区邯郸路220号
入库时间 2023-06-19 17:46:50

法律信息

法律状态公告日

法律状态信息

法律状态
2022-11-29

公开

发明专利申请公布

相似文献

专利
中文文献
外文文献

1. 一种基于多概念知识挖掘的视频描述生成方法及存储介质 [P] . 中国专利： CN114743143A . 2022-07-12
2. 基于视觉常识知识表征的视频描述生成方法 [P] . 中国专利： CN115098727A . 2022-09-23
3. Method for testing machine-readable description of device in electronic device description language, involves checking syntactic and/or semantic errors automatically by component for knowledge processing based on knowledge [P] . 德国专利： DE102012205286A1 . 2013-01-10

机译：以电子设备描述语言测试设备的机器可读描述的方法，涉及通过组件自动检查语法和/或语义错误，以基于知识进行知识处理
4. Traffic information description model establishment method, traffic information element knowledge base generation method, traffic information conversion method, traffic information description model establishment device, traffic information element knowledge base generation device, and traffic information conversion device [P] . 日本专利： JP5300821B2 . 2013-09-25

机译：交通信息描述模型建立方法，交通信息元素知识库生成方法，交通信息转换方法，交通信息描述模型建立设备，交通信息元素知识库生成设备和交通信息转换设备
5. A Recorded Medium for storing a Video Summary Description Scheme, An Apparatus and a Method for Generating Video Summary Descriptive Data, and An Apparatus and a Method for Browsing Video Summary Descriptive Data Using the Video Summary Description Scheme [P] . 韩国专利： KR100371813B1 . 2003-02-11

机译：用于存储视频摘要描述方案的记录介质，用于生成视频摘要描述数据的设备和方法，以及用于使用视频摘要描述方案浏览视频摘要描述数据的设备和方法