首页> 中国专利> 一种基于统计量与相似性的网络新词发现方法及系统

一种基于统计量与相似性的网络新词发现方法及系统

摘要

本发明属于自然语言处理领域,公开了一种基于统计量与相似性的网络新词发现方法及系统,先计算单字词的词频得到初始的单字词集合,并利用改进后的增强互信息和加权左右邻接熵从左向右扩展多字候选词,合并单字词集和多字词集得到候选新词集,然后将候选词作为中心词进行依存句法分析,计算句法结构的相似性值和候选新词所在句子与历史表达的语义相似值,进行过滤得到新词集合。和传统的统计量计算结果相比,本发明选用的方法可以有效过滤部分重复含义的词串,也解决了字词出现次数以及贡献不对称问题,加入相似性判断之后,有效提高了新词发现的准确。

著录项

  • 公开/公告号CN113033183A

    专利类型发明专利

  • 公开/公告日2021-06-25

    原文格式PDF

  • 申请/专利权人 西北大学;

    申请/专利号CN202110235703.2

  • 发明设计人 陈莉;张爽;李铮;

    申请日2021-03-03

  • 分类号G06F40/216(20200101);G06F40/289(20200101);G06F40/253(20200101);G06F40/30(20200101);G06K9/62(20060101);

  • 代理机构61216 西安恒泰知识产权代理事务所;

  • 代理人王芳

  • 地址 710069 陕西省西安市太白北路229号

  • 入库时间 2023-06-19 11:35:49

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2023-10-27

    授权

    发明专利权授予

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号