首页> 中文会议>2011年中国计算机学会服务计算学术会议(CCF NCSC2011) >HugeTable：一种面向电信行业的云数据仓库

HugeTable：一种面向电信行业的云数据仓库

页面导航

摘要
著录项
相似文献
相关主题

摘要

本文对面向电信行业的云数据仓库进行了研究。在过去的三年中，随着用户的增加和移动互联网的发展，企业，尤其是电信运营商，面临着数据的爆炸式增长，比如，电信运营商拥有上亿的用户和提供成千上万的服务。这些用户和服务每天产生的数据达到了PB级。为了存储和分析海量的数据，主流电信运营商都引入了云计算系统，比如Hadoop分布式文件系统(HDFS)。然而以hadoop为基础的开源系统并不能完全满足电信运营商的全部需求，比如说实时响应。为了克服该问题，针对电信运营商的在线服务一种名叫HugeTable的数据仓库被提出。HugeTable提出了两种新颖的存储引擎，半随机的HT-HFile和半列存储的HT-RCFile。和开源系统相比，Hugetable可以同时创建密集索引和稀疏索引，用来加快查询速度。在查询过程中，HugeTable首先查询索引。如果查询列上没有索引，则利用HT-HFile和HT-RCFile存储引擎来优化MapReduce查询过程。通过部署在现网中的服务中之后，HugeTable的索引和存储引擎能够极大地提高查询性能，满足了现网服务系统的性能需求。现网系统的实际使用证明了HugeTable的高性能。

著录项

来源
《2011年中国计算机学会服务计算学术会议(CCF NCSC2011)》|2011年|1-4|共4页
会议地点济南
作者
周大; 钱岭; 郭磊涛; 齐骥;
展开▼
作者单位

中国计算机学会;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类 TP393.02;TP311.13;
关键词
计算机网络; 电信服务; 存储引擎; 数据挖掘;

相似文献

中文文献
外文文献
专利

1. 面向滑坡体三维点云数据的一种压缩方法 [J] . 李绕波 ,袁希平 ,甘淑 . 城市勘测 . 2020,第002期
2. 面向文物三维重建的一种点云数据精简方法 [J] . 符晨曦 ,程钢 ,原东方 . 遥感信息 . 2018,第001期
3. 一种面向数据仓库周期性查询的增量优化方法 [J] . 康炎丽 ,李丰 ,王蕾 . 软件学报 . 2017,第008期
4. 一种面向医疗机构的数据仓库应用架构 [J] . 王斌 . 价值工程 . 2012,第015期
5. 一种面向软件仓库挖掘的动态作业配置框架 [J] . 史殿习 ,尹刚 ,米海波 . 计算机科学 . 2011,第007期
6. 一种面向数据仓库项目数据接入的基于数据元素的数据质量管理方法 [C] . 刘晨 ,苏颖 . 第六届科技信息资源共享促进国际会议 . 2011
7. 面向分析决策的电信行业数据仓库系统研究 [A] . 方晖 . 2009

HugeTable：一种面向电信行业的云数据仓库

摘要

著录项

相似文献

相关主题

期刊订阅