首页> 中文期刊> 《自动化与仪器仪表》 >基于Hadoop平台的用电行为数据特征挖掘方法

基于Hadoop平台的用电行为数据特征挖掘方法

         

摘要

针对用户用电行为数据挖掘效率低,规模大的难题,提出了基于Hadoop平台的用电行为数据特征挖掘方法。将用电行为数据按行保存于Hadoop分布式文件系统,把用电行为数据集划分为不同切片产生子数据集,利用MapReduce计算模块对各切片数据进行读取。对k-means方法进行优化,针对初始聚类中心的选择问题,通过数据密度进行处理,结合KL散度,对挖掘得到的用电行为数据进行聚类处理。针对主成分分析方法的弊端进行优化,在进行协方差矩阵特征分解的过程中,可对新到达的电力数据进行增量计算,无需对全部电力数据进行扫描,降低计算复杂度,实现用电行为数据流的特征提取处理。经实例验证,所提方法特征挖掘精度高,可有效分析用电行为数据。

著录项

相似文献

  • 中文文献
  • 外文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号