首页> 中国专利> 一种基于自监督和混合密度网络的人脸动画生成方法

一种基于自监督和混合密度网络的人脸动画生成方法

摘要

本发明涉及一种基于自监督和混合密度网络的人脸动画生成方法,从语音fbank特征中分离语音内容特征向量和身份特征向量,为提取高质量语音特征,引入记忆模块,在记忆模块中保存多个不同假设,将语音映射到唇部动作和头部动作时产生的不确定性分配给记忆模块,从而使特征提取器专注于特征提取。为了解决语音映射到头部动作时产生的不确定性问题,将混合密度网络引入到人脸关键点回归任务中,提出基于混合密度网络的人脸关键点回归网络。最后将人脸关键点和参考人脸图像输入到图片到图片转换网络中得到最终的人脸图像。

著录项

  • 公开/公告号CN114155321A

    专利类型发明专利

  • 公开/公告日2022-03-08

    原文格式PDF

  • 申请/专利权人 天津大学;

    申请/专利号CN202111424899.6

  • 申请日2021-11-26

  • 分类号G06T13/00(20110101);G06V40/16(20220101);G06V10/82(20220101);G06N3/04(20060101);G06N3/08(20060101);G10L15/02(20060101);G10L15/04(20130101);

  • 代理机构12209 天津盛理知识产权代理有限公司;

  • 代理人霍慧慧

  • 地址 300071 天津市南开区卫津路92号

  • 入库时间 2023-06-19 14:26:44

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-03-08

    公开

    发明专利申请公布

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号