一种朴素贝叶斯文本分类算法的分布并行实现

郭绪坤; 范冰冰

首页> 中文期刊> 《计算机应用与软件》 >一种朴素贝叶斯文本分类算法的分布并行实现

一种朴素贝叶斯文本分类算法的分布并行实现

页面导航

摘要
著录项
相似文献
相关主题

摘要

针对当前朴素贝叶斯文本分类算法在处理文本分类时存在的数据稀疏、分类不准及效率低的问题,提出一种基于Map Reduce的Dirichlet朴素贝叶斯文本分类算法。算法首先根据体征词语义因素以及类内分布情况对权重进行加权调整,以此对的计算公式进行修正;引入统计语言建模技术中的Dirichlet数据平滑方法来降低数据稀疏对分类性能的影响,并在Hadoop云计算平台采用Map Reduce编程模型实现本文算法的并行化。通过测试实验对比分析可知,该算法显著提高了传统朴素贝叶斯文本分类算法的准确率、召回率,并具有优良的可扩展性和数据处理能力。

著录项

来源
《计算机应用与软件》 |2016年第11期|240-243|共5页
作者
郭绪坤; 范冰冰;
展开▼
作者单位

广州体育学院;

华南师范大学计算机学院;

展开▼
原文格式 PDF
正文语种 chi
中图分类程序设计、软件工程;
关键词
朴素贝叶斯; 文本分类; TF-IDF修正; 数据平滑; MapReduce并行化;

相似文献

中文文献
外文文献
专利

1. 基于泊松分布的加权朴素贝叶斯文本分类算法 [J] . 赵博文 ,王灵矫 ,郭华 . 计算机工程 . 2020,第4期
2. 云计算环境下朴素贝叶斯文本分类算法的实现 [J] . 江小平 ,李成华 ,向文 . 计算机应用 . 2011,第9期
3. 一种基于属性加权补集的朴素贝叶斯文本分类算法 [J] . 陈凯 ,黄英来 ,高文韬 . 哈尔滨理工大学学报 . 2018,第4期
4. 一种新型朴素贝叶斯文本分类算法 [J] . 邸鹏 ,段利国 . 数据采集与处理 . 2014,第1期
5. 一种改进的朴素贝叶斯文本分类算法 [J] . 刘沛骞 ,冯晶晶 . 科技与创新 . 2010,第27期
6. 并行化的半监督朴素贝叶斯分类算法 [C] . JIANG Kai ,江凯 ,GAO Yang . 第29届中国数据库学术会议 . 2012
7. 面向不平衡数据集的朴素贝叶斯文本分类算法改进研究 [A] . 陈凯 . 2018

一种朴素贝叶斯文本分类算法的分布并行实现

摘要

著录项

相似文献

相关主题

期刊订阅