首页> 中国专利> 文本扰动检测方法、扰动还原方法、扰动处理方法和装置

文本扰动检测方法、扰动还原方法、扰动处理方法和装置

摘要

本申请公开了一种文本扰动检测方法、扰动还原方法、扰动处理方法和装置,涉及自然语言处理技术领域。其中,文本扰动检测方法包括:对第一文本进行分词,得到第一词序列;获取所述第一词序列的每个词的上下文向量表示;根据所述上下文向量表示,检测所述第一词序列中的扰动词。本申请根据上下文向量表示检测出文本中的扰动词,以实现文本扰动检测。在检测出扰动词之后,通过对扰动词进行掩码处理,并通过获取掩码标志的预估上下文向量表示来确定扰动词的替换词,以实现文本扰动还原。通过上述文本扰动检测和文本扰动还原过程,能够有效地消除文本扰动,从而能够提高文本审核效果。

著录项

  • 公开/公告号CN111783443A

    专利类型发明专利

  • 公开/公告日2020-10-16

    原文格式PDF

  • 申请/专利权人 百度在线网络技术(北京)有限公司;

    申请/专利号CN202010607386.8

  • 发明设计人 王文华;吕中厚;王洋;

    申请日2020-06-29

  • 分类号G06F40/284(20200101);G06K9/62(20060101);

  • 代理机构11243 北京银龙知识产权代理有限公司;

  • 代理人许静;黄灿

  • 地址 100085 北京市海淀区上地十街10号百度大厦三层

  • 入库时间 2023-06-19 08:34:56

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2023-08-15

    授权

    发明专利权授予

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号