首页> 中国专利> 用于自然语言处理的停用词数据扩充

用于自然语言处理的停用词数据扩充

摘要

用于在自然语言处理中训练聊天机器人系统的停用词数据扩充技术。在一个特定方面,一种计算机实施的方法包括接收话语训练集,所述话语训练集用于训练意图分类器以识别话语的意图;用停用词扩充所述话语训练集,以生成针对与未解析意图相对应的未解析意图类别的扩充的域外话语训练集;以及使用所述话语训练集和所述扩充的域外话语训练集来训练所述意图分类器。所述扩充包括:从所述话语训练集中选择话语,以及针对每个所选话语,保留所述话语内的现有停用词,并将所述话语内的至少一个非停用词替换为从停用词列表中选择的停用词或停用词短语以生成域外话语。

著录项

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-09-13

    实质审查的生效 IPC(主分类):G06F16/33 专利申请号:2020800645414 申请日:20200911

    实质审查的生效

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号