首页> 中国专利> 交互检测方法、交互检测模型的预训练方法及设备

交互检测方法、交互检测模型的预训练方法及设备

摘要

本发明实施例提供了一种交互检测方法、交互检测模型的预训练方法及设备;方法包括:获取待检测图像以及用于对待检测图像进行交互检测的多个标签,多个标签包括多个主体标签、多个客体标签以及多个交互标签;基于待检测图像和多个标签,确定跨模态融合特征;基于跨模态融合特征分别进行主体检测和客体检测,获得主体检测信息和客体检测信息;基于主体检测信息和客体检测信息进行关系检测,获得主体与客体之间的至少一个预测交互关系。本实施例中,基于跨模态融合特征实现了平行主体检测,提高了主体和客体的检测准确性;并基于主体和客体的检测信息来确定预测交互关系,实现了与主体检测相互独立的交互检测,有利于提高交互检测的准确可靠性。

著录项

  • 公开/公告号CN115063640B

    专利类型发明专利

  • 公开/公告日2022.12.16

    原文格式PDF

  • 申请/专利权人 阿里巴巴(中国)有限公司;

    申请/专利号CN202210976992.6

  • 发明设计人 袁杭杰;蒋建文;吕逸良;赵德丽;

    申请日2022.08.15

  • 分类号G06V10/764(2022.01);G06V10/80(2022.01);G06V10/774(2022.01);G06N20/00(2019.01);

  • 代理机构北京太合九思知识产权代理有限公司 11610;北京太合九思知识产权代理有限公司 11610;

  • 代理人孙明子;刘戈

  • 地址 310023 浙江省杭州市余杭区五常街道文一西路969号3幢5层554室

  • 入库时间 2023-01-09 21:32:12

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号