利用覆盖歧义检测法和统计语言模型进行汉语自动分词

王显芳; 杜利民

首页> 中文期刊> 《电子与信息学报》 >利用覆盖歧义检测法和统计语言模型进行汉语自动分词

利用覆盖歧义检测法和统计语言模型进行汉语自动分词

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

该文探讨了利用覆盖歧义检测法和统计语言模型进行汉语自动分词的问题.采用了多次迭代的方法来进行汉语词层面统计语言模型的训练.该方法能够得到更优化的语言模型.该文详细介绍了统计语言模型的训练过程,给出了语言模型复杂度随迭代次数增加而减小的实验结果.还给出了在不同的统计语言模型阶数下切分正确率变化的情况,分析了切分正确率变化的原因.

著录项

来源
《电子与信息学报》 |2003年第9期|1168-1173|共6页
作者
王显芳; 杜利民;
展开▼
作者单位

中国科学院声学研究所语音交互信息技术研究中心,北京,100080;

中国科学院声学研究所语音交互信息技术研究中心,北京,100080;

展开▼
原文格式 PDF
正文语种 chi
中图分类模式识别与装置;语音信号处理;
关键词
统计语言模型; 覆盖歧义检测法; 自动分词;

相似文献

中文文献
外文文献
专利

1. 利用上下文信息解决汉语自动分词中的组合型歧义 [J] . 肖云 ,孙茂松 ,邹嘉彦 . 计算机工程与应用 . 2001,第019期
2. 利用汉字二元语法关系解决汉语自动分词中的交集型歧义 [J] . 孙茂松 ,黄昌宁 ,邹嘉彦 . 计算机研究与发展 . 1997,第005期
3. 利用统计语言模型对GenoCAD设计结果进行优化 [J] . 方刚 ,张社民 . 统计与信息论坛 . 2016,第008期
4. 利用直肠检测法进行奶牛的的早期妊娠诊断 [J] . 梁巍 . 黑龙江动物繁殖 . 2006,第004期
5. 利用遥感技术进行全球测图项目中的中国土地利用覆盖和植被分类图的制作ProduceLanduseLa [J] . 张炳智 ,张丽 ,张继贤 . 测绘科学 . 2002,第1期
6. 汉语自动分词中的上下文相关歧义字段(CSAS)研究 [C] . 侯敏 ,陈琼璜 ,初田天 . 全国第八届计算语言学联合学术会议 . 2005
7. 现代汉语自动分词歧义分析及其消歧处理研究 [A] . 刘宽 . 2006

利用覆盖歧义检测法和统计语言模型进行汉语自动分词

摘要

著录项

相似文献

相关主题

期刊订阅