首页> 中国专利> 一种基于多模态编码本的跨模态人物服装设计生成方法

一种基于多模态编码本的跨模态人物服装设计生成方法

摘要

本发明公开了一种基于多模态编码本的跨模态人物服装设计生成方法,包括步骤如下:将第一目标衣服图像输入图像编码器,编码得到特征向量图,构造一个第一特征编码本;将特征向量图离散化后,从第一特征编码本中选取不同的离散化编码,组合得到离散化后的编码特征图;将编码特征图输入解码器进行解码,解码得到复原后的第二目标衣服图像,并对第二目标衣服图像进行分块损失计算,并通过反向梯度传播,分步更新图像编码器、解码器;利用标记性对比损失来学习视觉特征和单词嵌入之间的对应关系进行训练,得到富含语义和图像信息的第二特征编码本;通过输入目标图像训练基于注意力机制的神经网络去预测图像中的序列,从第二特征编码本中采样得到序列值,用第二解码器解码序列值输出得到最后的图像。

著录项

  • 公开/公告号CN114491125A

    专利类型发明专利

  • 公开/公告日2022-05-13

    原文格式PDF

  • 申请/专利权人 中山大学;

    申请/专利号CN202111679605.4

  • 发明设计人 沙煜;张绪杰;谢震宇;梁小丹;

    申请日2021-12-31

  • 分类号G06F16/583;G06F16/56;G06F16/55;G06N3/04;G06N3/08;

  • 代理机构

  • 代理人

  • 地址 510275 广东省广州市海珠区新港西路135号

  • 入库时间 2023-06-19 15:18:12

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-05-31

    实质审查的生效 IPC(主分类):G06F16/583 专利申请号:2021116796054 申请日:20211231

    实质审查的生效

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号