基于多策略的流数据查询优化方法研究

代理获取

页面导航

目录
摘要
著录项
相似文献
相关主题

摘要

随着信息技术的发展，物联网越来越多的应用到像智能交通、智能家居、智能医疗等的智能应用行业中，以传感设备为基础的各类流式数据的实时接收和处理成为物联网智能应用的关键。
　　在智能交通应用中，实时采集的交通信息要进行有效的存储，为交通信息服务、交通计算、交通管理等提供数据支持。面对大规模的、快速、实时、连续不间断到达的流数据，如何实现大规模流式数据的存储以及提供高效的数据查询方法成为智能交通应用中不可避免的问题。针对这一问题，提出一种适用于物联网数据管理的结构化数据查询优化方法，在保障流数据存储的同时提供高效的数据查询能力。该方法采用数据库集群技术搭建主从数据库环境;采用数据分区技术创建分区表用于数据存储，实时接收的流数据连续不断的写入主数据库;采用主从延迟复制策略通过定时增量复制技术将数据异步复制到从数据库集群，为大规模历史数据的查询提供数据支持;采用数据缓存技术应对重复查询时的性能需求。该方法采用的数据库集群技术在应对数据并发访问的同时减少数据查询对数据写入的性能影响，采用数据分区和数据缓存技术提升单数据节点的查询性能。实验结果表明，该方法能一定程度上减少数据查询对数据写入的影响，提高海量数据的查询效率。

著录项

作者
侯荣军;
展开▼
作者单位

山东科技大学;

展开▼
授予单位山东科技大学;
学科计算机应用技术
授予学位硕士
导师姓名韩燕波;
年度 2014
页码
总页数
原文格式 PDF
正文语种中文
中图分类电子计算机在公路运输和公路工程中的应用;
关键词
物联网; 数据管理; 查询优化; 结构化数据; 数据库集群;

相似文献

中文文献
外文文献
专利

1. 基于数据流数据处理模型的高效查询优化处理算法设计 [J] . 郭双宙 ,敖山 . 计算机应用与软件 . 2012,第004期
2. 流数据的连续查询优化技术 [J] . 冯卫兵 ,李战怀 . 计算机应用研究 . 2008,第001期
3. 基于多策略均衡的电力通信传输网运行状态评估方法研究 [J] . 樊秀娟 ,袁兆君 ,广泽晶 . 电力信息与通信技术 . 2017,第010期
4. 基于多策略均衡的电力通信传输网运行状态评估方法研究 [J] . 樊秀娟 ,袁兆君 ,广泽晶 . 电力信息化 . 2017,第010期
5. 基于多策略的微博位置数据获取方法研究 [J] . 杨飞 ,江南 ,李响 . 测绘科学技术学报 . 2016,第002期
6. 基于多策略的生物医学本体映射方法研究 [C] . Fang An ,方安 ,Qian Qing . 中国医学科学院/北京协和医学院医学信息研究所/图书馆2012年学术年会 . 2013
7. 基于HBase的交通流数据实时存储与查询优化方案的设计与实现 [A] . 瞿龙俊 . 2017

基于多策略的流数据查询优化方法研究

目录

摘要

著录项

相似文献

相关主题

期刊订阅