首页> 中文期刊> 《电子技术与软件工程》 >适用于电网多元数据的通用事件驱动型数据模型

适用于电网多元数据的通用事件驱动型数据模型

         

摘要

作为一种面向列的、分布式的、高容错的数据库,HBase由于其容量大、随机读取快和优良的批量处理的性能,逐渐被制造业所采用。电网通常从多元数据源中产生大量的数据。与服务于关系查询的传统关系数据库不同,HBase中JOIN操作性能很低。在HBase的应用中,如何存储数据以保证JOIN运算和随机读取的充分性能是必须解决的关键问题。在本文中,我们提出了一种事件驱动型的HBase数据模型来解决这个问题。在我们的数据模型中,每一条数据记录都被定义为发生在电网中的唯一事件。来自各数据源的各类数据都可以在数据库中加以区分。因此,我们的数据模型可以存储由电网设备产生的多源数据。此外,我们通过在表中设计一个特定的Row Key,提高了集成在我们的数据模型中的JOIN运算操作从多个数据源读取数据的性能。我们还提出了一种包含了新型虚拟列族的方案,它解决了存储多源数据的兼容性问题。通过设计特定的限定符来实现虚拟列族。为了验证我们数据模型的有效性,我们在Hadoop平台上进行了实征性研究以比较我们的优化方案和原始方案。实验结果表明,我们的数据模型确保了优化后的方案比基于原始数据模型的方案更好。

著录项

  • 来源
    《电子技术与软件工程》 |2018年第2期|P.182-185|共4页
  • 作者单位

    [1]国网江苏省电力公司信息通信分公司,江苏省南京市210000;

    [2]国网江苏省电力公司,江苏省南京市210000;

    [1]国网江苏省电力公司信息通信分公司,江苏省南京市210000;

    [3]北京友友天宇系统技术有限公司,北京市100022;

    [3]北京友友天宇系统技术有限公司,北京市100022;

  • 原文格式 PDF
  • 正文语种 CHI
  • 中图分类 TP311.13;
  • 关键词

    数据库; 数据模型; 电网;

相似文献

  • 中文文献
  • 外文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号