一种基于国网指标体系的通用电力企业数据分析系统

技术领域

本发明属于数据分析系统领域，具体涉及一种基于国网指标体系的通用电力企业数据分析系统。

背景技术

目前，随着电力企业数据重要性的凸显，越来越多的电力企业认识到数据分析对于企业的管理和运营的必要性，从而加大对电力业务数据分析工作的重视力度，定期制作和发布运营监测日报、月报以及关于各类专题的分析报告和总结。

现有技术中，电力企业存在使用的原始数据不统一，数据来源不同导致电力企业数据分析存在复杂性和滞后性的问题，影响整体电力系统的管理，此为现有技术的不足之处。

发明内容

本发明的目的在于，针对上述现有技术存在数据来源不同，导致电力企业数据分析复杂性和滞后性的缺陷，提供设计一种基于国网指标体系的通用电力企业数据分析系统，以解决上述技术问题。

一种基于国网指标体系的通用电力企业数据分析系统，包括：

登录模块、数据接入模块、数据存储模块、数据处理模块、数据分析模块、数据展示模块；通过登录模块登录本系统，将原始数据通过所述的数据接入模块传入本系统，存储到所述的数据存储模块，通过数据处理模块以及数据分析模块输出数据分析报告，所述的数据分析报告通过所述的数据展示模块设置有网页展示子模块、数据可视化LED大屏展示子模块，嵌入式设备展示子模块；所述的数据分析模块使用Power BI软件进行数据分析。

作为优选，所述的登录模块包括用户注册子模块、用户登录子模块和密码修改子模块；所述的用户注册子模块设置有用户名单元、密码单元、基本信息单元、其他信息单元；所述的用户注册子模块为用户的登录提供了前提条件；所述的用户登录子模块防止非法用户登录到系统中非法篡改数据和其他非法操作从而保证数据分析系统的安全和可靠性；所述的密码修改子模块消除用户忘记密码以及密码泄露导致对系统和个人带来的安全隐患。

作为优选，所述的数据接入模块包括数据库接入子模块、日志数据接入子模块、文件接入子模块、物联网数据接入子模块；所述的数据库接入子模块为Oracle数据库接入；所述的日志数据接入子模块使用工具为Flume；所述的文件接入子模块为WebDAV协议接入；所述的物联网数据接入子模块是流式数据，通过Kafka接入数据分析系统；选择数据分析系统接入原始数据的接入方式，从而对原始数据进行进一步处理。

作为优选，所述的数据存储模块包括csv存储子模块、Excle存储子模块、Sql存储子模块；所述的csv存储子模块中存储格式为纯文本文件，占用内存低，计算机能快速处理大量原始数据，准确率高；所述的Excle存储子模块中存储格式读取快、数据存储量大、安全性高；所述的Sql存储子模块中存储格式保证数据的完整性；数据存储模块存储数据接入模块中输出的数据信息。

作为优选，所述的数据处理模块包括数据提取子模块、数据整合子模块、数据分组子模块、数据计算子模块。

作为优选，所述的数据提取子模块将数据存储模块内文件提取出进行进一步处理。

作为优选，所述的数据整合子模块包括数据清洗单元、数据规范化单元；所述的数据清洗单元主要是删除原始数据集内的无关数据、重复数据，处理缺失值、异常值等，数据清洗单元过滤出的数据写入到Excel文件进行记录；所述的数据规范化单元是对数据清洗操作所得到的数据，进行规范化处理，数据规范化单元使传入数据符合国网指标体系的通用电力企业数据分析系统的标准。

作为优选，所述的数据分组子模块包括属性指标和数量指标；所述的属性指标代表的数据说明事物的性质和特征，不能进行运算，例如公司名称，公司编码、用户类别等字段；所述的数量指标代表的数据说明事物的数量的特征，可以进行加减乘除的运算，例如售电量、发电量、电费价格等字段；通过数据分组子模块将所需的字段分离出来。

作为优选，所述的数据计算子模块包括常用计算公式、计算因子设计；所述的常用计算公式主要包括各统计量的计算公式的定义，例如样本均值、样本方差等统计量的计算公式；所述的计算因子设计包括数据计算子模块进行计算时所输入的数据，所述的数据计算子模块所输出的数据也可以作为计算因子再次输入。

作为优选，所述的数据分析模块使用Power BI软件进行数据分析，开设对数据进行下一步的操作，所述的数据源包括Excel、数据库、Web浏览器；连接Excel直接选择获取数据；连接数据库有导入方式和DirectQurey方式；连接Web浏览器，Power BI提供直接抓取Web数据；Power BI输出数据分析报告和基本图表，所述的基本图表例如柱状图，饼状图，折线图等；通过数据分析发现数据内部关系和规律，掌握好这些关系和规律就能更好的进行数据分析工作，提取有用信息从而形成结论，对数据加以详细研究和概括总结。

本发明的有益效果在于，本系统设置登录模块、数据接入模块、数据存储模块、数据处理模块、数据分析模块、数据展示模块，电力企业通过本系统提供的基于国网指标体系的通用电力企业数据分析系统进行数据处理、数据分析、数据展示，实现对电力企业数据的分析，本系统便于整个电力系统的管理，消除因数据的来源不同导致的数据分析滞后性和复杂性的问题。此外，本发明设计原理可靠，结构简单，具有非常广泛的应用前景。

由此可见，本发明与现有技术相比，具有突出的实质性特点和显著地进步，其实施的有益效果也是显而易见的。

附图说明

图1为本发明的结构示意图。

其中，其中，1-一种基于国网指标体系的通用电力企业数据分析系统；2-登录模块；2.1-用户注册子模块；2.2-用户登录子模块；2.3-密码修改子模块；3-数据接入模块；3.1-数据库接入子模块；3.2-日志数据接入子模块；3.3-物联网数据接入子模块；3.4-文件接入子模块；4-数据存储模块；4.1-csv存储子模块；4.2-Sql存储子模块；4.3-Excle存储子模块；5-数据处理模块；5.1-数据提取子模块；5.2-数据整合子模块；5.3-数据分组子模块；5.4-数据计算子模块；5.5-数据清洗单元；5.6-数据规范化单元；6-数据分析模块；6.1-Power BI；6.2-Power BI API；7-数据展示模块；7.1-网页展示子模块；7.2-嵌入式设备展示子模块；7.3-数据可视化LED大屏展示子模块。

具体实施方式

下面结合附图并通过具体实施例对本发明进行详细阐述，以下实施例是对本发明的解释，而本发明并不局限于以下实施方式。

如图1所示一种基于国网指标体系的通用电力企业数据分析系统1，包括：

登录模块2、数据接入模块3、数据存储模块4、数据处理模块5、数据分析模块6、数据展示模块7；通过登录模块2登录本系统，将原始数据通过所述的数据接入模块3传入本系统，存储到所述的数据存储模块4，通过数据处理模块5以及数据分析模块6输出数据分析报告，所述的数据分析报告通过所述的数据展示模块7设置有网页展示子模块7.1、数据可视化LED大屏展示子模块7.3，嵌入式设备展示子模块7.2；所述的数据分析模块6使用PowerBI 6.1软件进行数据分析。

所述的登录模块2包括用户注册子模块2.1、用户登录子模块2.2和密码修改子模块2.3；所述的用户注册子模块2.1设置有用户名单元、密码单元、基本信息单元、其他信息单元；所述的用户注册子模块2.1为用户的登录提供了前提条件；所述的用户登录子模块2.2防止非法用户登录到系统中非法篡改数据和其他非法操作从而保证数据分析系统的安全和可靠性；所述的密码修改子模块2.3消除用户忘记密码以及密码泄露导致对系统和个人带来的安全隐患。

所述的数据接入模块3包括数据库接入子模块3.1、日志数据接入子模块3.2、文件接入子模块3.4、物联网数据接入子模块3.3；所述的数据库接入子模块3.1为Oracle数据库接入；所述的日志数据接入子模块3.2使用工具为Flume；所述的文件接入子模块3.4为WebDAV协议接入；所述的物联网数据接入子模块3.3是流式数据，通过Kafka接入数据分析系统；选择数据分析系统接入原始数据的接入方式，从而对原始数据进行进一步处理。

所述的数据存储模块4包括csv存储子模块4.1、Excle存储子模块4.3、Sql存储子模块4.2；所述的csv存储子模块4.1中存储格式为纯文本文件，占用内存低，计算机能快速处理大量原始数据，准确率高；所述的Excle存储子模块4.3中存储格式读取快、数据存储量大、安全性高；所述的Sql存储子模块4.2中存储格式保证数据的完整性；数据存储模块4存储数据接入模块3中输出的数据信息。

所述的数据处理模块5包括数据提取子模块5.1、数据整合子模块5.2、数据分组子模块5.3、数据计算子模块5.4。所述的数据提取子模块5.1将数据存储模块4内文件提取出进行进一步处理。

所述的数据整合子模块5.2包括数据清洗单元5.5、数据规范化单元5.6；所述的数据清洗单元5.5主要是删除原始数据集内的无关数据、重复数据，处理缺失值、异常值等，数据清洗单元5.5过滤出的数据写入到Excel文件进行记录；所述的数据规范化单元5.6是对数据清洗操作所得到的数据，进行规范化处理，数据规范化单元5.6使传入数据符合国网指标体系的通用电力企业数据分析系统的标准。

所述的数据分组子模块5.3包括属性指标和数量指标；所述的属性指标代表的数据说明事物的性质和特征，不能进行运算，例如公司名称，公司编码、用户类别等字段；所述的数量指标代表的数据说明事物的数量的特征，可以进行加减乘除的运算，例如售电量、发电量、电费价格等字段；通过数据分组子模块5.3将所需的字段分离出来。

所述的数据计算子模块5.4包括常用计算公式、计算因子设计；所述的常用计算公式主要包括各统计量的计算公式的定义，例如样本均值、样本方差等统计量的计算公式；所述的计算因子设计包括数据计算子模块5.4进行计算时所输入的数据，所述的数据计算子模块5.4所输出的数据也可以作为计算因子再次输入。

所述的数据分析模块6中Power BI 6.1通过Power BI API 6.2连接数据源，开设对数据进行下一步的操作，所述的数据源包括Excel、数据库、Web浏览器；连接Excel直接选择获取数据；连接数据库有导入方式和DirectQurey方式；连接Web浏览器，Power BI提供直接抓取Web数据；Power BI 6.1输出数据分析报告和基本图表，所述的基本图表例如柱状图，饼状图，折线图等；通过数据分析发现数据内部关系和规律，掌握好这些关系和规律就能更好的进行数据分析工作，提取有用信息从而形成结论，对数据加以详细研究和概括总结。

以上公开的仅为本发明的优选实施方式，但本发明并非局限于此，任何本领域的技术人员能思之的没有创造性的变化，以及在不脱离本发明原理前提下所作的若干改进和润饰，都应落在本发明的保护范围内。