首页> 中国专利> 一种基于多模态差异性融合网络的RGB-D显著性目标检测方法

一种基于多模态差异性融合网络的RGB-D显著性目标检测方法

摘要

本发明提供一种基于多模态差异性融合网络的RGB‑D显著性目标检测方法,属于图像显著性检测技术,所述方法利用Swin Transformer提取包含全局上下文信息的RGB和Depth特征,用于给出场景的显著性目标推理。本发明主要通过探索RGB和Depth模态之间的差异性分析显著性在这两个模态的联系和区别,并设计一个差异性融合网络融合跨模态特征用于捕获完整的显著目标。本发明包括以下几个步骤:(1)采用Swin Transformer提取跨模态特征;(2)使用双向融合方式融合RGB和Depth特征生成Fusion流;(3)使用三流差异性监督机制获取模态之间差异性;(4)利用该差异性融合跨模态特征;(5)使用目级联聚合解码器对融合的跨模态特征进行显著性的推理和解码,生成预测的显著性图。

著录项

  • 公开/公告号CN114693952A

    专利类型发明专利

  • 公开/公告日2022-07-01

    原文格式PDF

  • 申请/专利权人 安徽理工大学;

    申请/专利号CN202210308520.3

  • 申请日2022-03-24

  • 分类号G06V10/46;G06K9/62;G06N3/04;G06N3/08;G06V10/80;G06V10/82;G06V10/774;

  • 代理机构

  • 代理人

  • 地址 232001 安徽省淮南市山南新区泰丰大街168号

  • 入库时间 2023-06-19 15:50:55

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-07-01

    公开

    发明专利申请公布

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号