基于信息熵与词语活跃度的领域词抽取

王成; 吕学强; 王弘蔚; 王涛

首页> 中文期刊> 《北京信息科技大学学报（自然科学版）》 >基于信息熵与词语活跃度的领域词抽取

基于信息熵与词语活跃度的领域词抽取

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

提出了一种基于信息墒和词语活跃度的领域词抽取方法,通过对语料进行预处理,提取出候选领域词,计算所有候选领域词的正规化类间分布(NCD)和正规化类内分布(NDD),设置阈值对候选领域词过滤,最后分析了双字候选领域词中包含的常见噪音词语,使用词语活跃度对候选领域词中的双字词语进行过滤,该方法综合考虑了领域词在类别中的概率分布和领域词的内部特征.实验结果表明,该方法在领域词的识别上具有较好的准确率和召回率.

著录项

来源
《北京信息科技大学学报（自然科学版）》 |2011年第5期|49-5258|共5页
作者
王成; 吕学强; 王弘蔚; 王涛;
展开▼
作者单位

北京信息科技大学中文信息处理研究中心,北京100101;

北京信息科技大学中文信息处理研究中心,北京100101;

北京信息科技大学中文信息处理研究中心,北京100101;

北京信息科技大学中文信息处理研究中心,北京100101;

展开▼
原文格式 PDF
正文语种 chi
中图分类信息处理（信息加工）;
关键词
领域词抽取; 领域词过滤; 信息熵; 词语活跃度; 知识获取; 自然语言处理;

相似文献

中文文献
外文文献
专利

1. 基于词共现和词上下文的领域观点词抽取方法 [J] . 宋施恩 ,樊兴华 . 计算机工程与设计 . 2013,第011期
2. 一种基于信息熵的中文高频词抽取算法 [J] . 任禾 ,曾隽芳 . 中文信息学报 . 2006,第005期
3. 语义相似度领域基于XGBOOST算法的关键词自动抽取方法 [J] . 王成柱 ,魏银珍 . 计算机与数字工程 . 2020,第006期
4. 基于深度学习的领域实体属性词聚类抽取研究 [J] . 苏丰龙 ,谢庆华 ,邱继远 . 微型机与应用 . 2016,第001期
5. 结合词语分布信息的TFIDF关键词抽取方法研究 [J] . 徐振强 ,李保利 . 中原工学院学报 . 2014,第006期
6. 基于流形排序的领域词抽取方法 [C] . 宋涛 ,李素建 . 第五届全国青年计算语言学研讨会(YWCL 2010) . 2010
7. 跨语言词语语义相似词抽取方法研究与实现 [A] . 王永根 . 2016

基于信息熵与词语活跃度的领域词抽取

摘要

著录项

相似文献

相关主题

期刊订阅