首页> 中国专利> 端到端的音视频抑郁症自动检测研究方法

端到端的音视频抑郁症自动检测研究方法

摘要

本申请涉及端到端的音视频抑郁症自动检测研究方法,包括:采集音频文件和视频文件中包含有长时音频文件和长时视频文件这两个模态的原始数据;音频文件和视频文件预处理:将长时音频文件切分成若干个音频段,同时将长时视频文件切分成具有固定帧数的多个视频段;将每一个音频段和视频段分别输入音频特征提取网络和视频特征提取网络,得到音频深度特征和视频深度特征;使用多头注意力机制对深度音频特征和深度视频特征进行计算,得到注意力音频特征和注意力视频特征;将注意力音频特征和注意力视频特征通过特征聚合模块聚合成音视频特征;将音视频特征输入决策网络,预测音视频文件中的个体的抑郁水平。

著录项

  • 公开/公告号CN112560811B

    专利类型发明专利

  • 公开/公告日2021-07-02

    原文格式PDF

  • 申请/专利权人 中国科学院自动化研究所;

    申请/专利号CN202110188624.0

  • 发明设计人 陶建华;蔡聪;刘斌;牛明月;

    申请日2021-02-19

  • 分类号G06K9/00(20060101);G06K9/62(20060101);G06N3/04(20060101);G10L25/30(20130101);G10L25/57(20130101);G10L25/63(20130101);G10L25/66(20130101);A61B5/16(20060101);

  • 代理机构11662 北京华夏泰和知识产权代理有限公司;

  • 代理人孙剑锋;刘蔓莉

  • 地址 100190 北京市海淀区中关村东路95号

  • 入库时间 2022-08-23 12:03:31

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号