首页> 中文会议>第五届中国人工智能联合学术会议 >一种高精度的单词自动切分模型

一种高精度的单词自动切分模型

摘要

该文提出采用字符N元语法模型(character-based n-gram model)和Viterbi算法自动切分单词,该方法尤其适用于汉语和日语等单词间无空白相隔的语言。在使用ADD(ATR Dialogue Database,日本ATR会话数据库)语料库的实验中,此方法的有效性已得到证实。其中,封闭语料的测试得到97.68℅的切全率(recall)和98.30℅精确率(precision)。而对开放语料的测试,则得到96.76℅的切全率和96.79℅的精确率。

著录项

相似文献

  • 中文文献
  • 外文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号