首页> 中国专利> 神经网络语言模型、文本预测方法、装置及存储介质

神经网络语言模型、文本预测方法、装置及存储介质

摘要

本发明实施例公开了一种神经网络语言模型、文本预测方法、装置及存储介质;神经网络语言模型包括:输入层,用于将输入的文本映射为相应的特征向量;隐藏层,用于调用激活函数,输出对应特征向量的第一隐层表达至输出层;输出层,用于将第一隐层表达进行分解,得到第一隐层表达分别在不同隐主题下对应的第二隐层表达;以及,分别确定每个第二隐层表达所对应的聚类,并调用所述聚类对应的归一化指数函数得到第二隐层表达对应的概率分布;其中,聚类包括头聚类及尾聚类,头聚类中文本分类的输出概率不同于尾聚类中文本分类的输出概率;以及,融合各第二隐层表达对应的概率分布,并基于融合后得到的概率分布输出对应所述文本的目标文本。

著录项

  • 公开/公告号CN110147444A

    专利类型发明专利

  • 公开/公告日2019-08-20

    原文格式PDF

  • 申请/专利权人 腾讯科技(深圳)有限公司;

    申请/专利号CN201811435778.X

  • 发明设计人 陈强;

    申请日2018-11-28

  • 分类号G06F16/35(20190101);G06N3/04(20060101);

  • 代理机构11270 北京派特恩知识产权代理有限公司;

  • 代理人王姗姗;张颖玲

  • 地址 518000 广东省深圳市南山区高新区科技中一路腾讯大厦35层

  • 入库时间 2024-02-19 12:54:43

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2019-08-20

    公开

    公开

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号