基于Hadoop集群的词频统计应用

刘顺

首页> 中文期刊> 《黑龙江科技信息》 >基于Hadoop集群的词频统计应用

基于Hadoop集群的词频统计应用

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

Hadoop是最近几年比较火的名词,也是大数据爱好者比较推崇的一种技术,是分布式系统基础架构,主要是实现了一个分布式文件系统,简称为HDFS,用户不需要深入的了解分布式底层技术就能很好的使用或者开发分布式程序.Hadoop还有一个优点就是存储大量的半结构化数据集,利用计算机集群通过Hadoop实现高并发高速率的运算和存储,也非常擅长数据分布式的计算,可以快速跨多台计算机处理大型的数据集,而且可以保障数据的安全实现数据冗余,不会因为一个磁盘的损坏造成数据的丢失,Hadoop的框架中最核心的设计就是:HDFS和MapReduce.HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算.

著录项

来源
《黑龙江科技信息》 |2020年第30期|97-98|共2页
作者
刘顺;
展开▼
作者单位

四川信息职业技术学院信息工程系四川广元 628017;

展开▼
原文格式 PDF
正文语种 chi
中图分类 TP311.13;
关键词
HDFS; MapReduce; Hadoop;

相似文献

中文文献
外文文献
专利

1. 基于Hadoop集群的词频统计应用 [J] . 刘顺 . 科学技术创新 . 2020,第030期
2. 基于词频统计算法的中英文词频分布研究 [J] . 李杰 ,孙仁诚 . 青岛大学学报（工程技术版） . 2020,第001期
3. 基于词频学习和动态词频更新的藏文自动分词系统设计 [J] . 项炜 ,金澎 . 计算机应用与软件 . 2014,第005期
4. 基于Hadoop集群的大数据新闻可视化平台的设计 [J] . 王一高 ,任耀星 ,李嘉瑶 . 电子技术与软件工程 . 2021,第007期
5. 基于Ambari的Hadoop集群快速部署研究 [J] . 吴丽杰 ,张璐璐 ,张婷 . 重庆工商大学学报（自然科学版） . 2020,第001期
6. 基于nagios的Hadoop集群性能监控 [C] . QIAN Tao ,钱涛 ,XUE Yizhao . 浙江省电子学会2014学术年会 . 2014
7. 基于容器的Hadoop集群能耗优化系统设计与实现 [A] . 吴振 . 2019

基于Hadoop集群的词频统计应用

摘要

著录项

相似文献

相关主题

期刊订阅