HOS:一种基于HBase的分布式存储系统设计与实现

季一木; 张宁; 尧海昌; 李奎; 李航; 刘尚东; 王汝传

首页> 中文期刊> 《南京邮电大学学报：自然科学版》 >HOS:一种基于HBase的分布式存储系统设计与实现

HOS:一种基于HBase的分布式存储系统设计与实现

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

大数据时代,数据快速增长,迫切需要寻找有效的数据存储方案,HBase系统具有分布式、列式存储的特点,为大数据的存储管理提供了一种高效的解决方案。由于HBase只支持主键索引,对于非主键查询效率低下,难以满足实时需求。为此,提出一种分层式索引查询模型,该模型基于HBase建立持久性索引层,基于Redis建立分布式热点索引缓存层。前者为存储在HBase中的数据建立索引表,提高查询效率,后者基于Redis在内存中存储热点索引,降低磁盘访问开销,进一步提高查询效率。最终,依据此模型实现了分层式索引查询系统HOS,基于Imagenet图片数据集对HOS进行实验,实验结果表明,HOS数据查询性能优于标准HBase。

著录项

来源
《南京邮电大学学报：自然科学版》 |2019年第5期|63-71|共9页
作者
季一木; 张宁; 尧海昌; 李奎; 李航; 刘尚东; 王汝传;
展开▼
作者单位

南京邮电大学计算机学院;

江苏南京210023;

南京邮电大学江苏省无线传感网高技术研究重点实验室;

江苏南京210023;

南京邮电大学高性能计算与大数据处理研究所;

江苏南京210023;

南京邮电大学高性能计算与智能处理工程研究中心;

江苏南京210023;

展开▼
原文格式 PDF
正文语种 chi
中图分类在其他方面的应用;
关键词
HBase; 查询处理; 分层式索引; 分布式存储;

相似文献

中文文献
外文文献
专利

1. 基于HBase的遥感数据分布式存储与查询方法研究 [J] . 景维鹏 ,田冬雪 . 计算机工程与科学 . 2018,第006期
2. 基于HBASE分布式存储的通用海量日志系统设计方法研究 [J] . 陈波 . 信息通信 . 2017,第006期
3. 基于HBase的AIS数据分布式存储 [J] . 孟凡君 ,曹伟 ,管志强 . 信息通信 . 2016,第005期
4. 基于分布式存储系统的Hive与Hbase的研究 [J] . 高金标 ,何利力 ,邹云阳 . 工业控制计算机 . 2015,第012期
5. 基于HBase的气象地面分钟数据分布式存储系统 [J] . 陈东辉 ,曾乐 ,梁中军 . 计算机应用 . 2014,第009期
6. 基于HBase的遥感数据分布式存储与查询方法研究 [C] . Jing Weipeng ,景维鹏 ,Tian Dongxue . 2017年全国高性能计算学术年会 . 2017
7. 基于HBase的空间数据分布式存储和并行查询算法研究 [A] . 丁琛 . 2014

HOS:一种基于HBase的分布式存储系统设计与实现

摘要

著录项

相似文献

相关主题

期刊订阅