一种电力系统营配调贯通数据的处理方法及装置[发明专利]

(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号 (43)申请公布日 (21)申请号 201610815700.5
(22)申请日 2016.09.09
(71)申请人 国家电网公司
地址 100031 北京市西城区西长安街86号
申请人 国网冀北电力有限公司电力科学研
究院 
华北电力科学研究院有限责任公司
(72)发明人 牛逸宁 贾建威 杨晓波 殷庆铎 
谢枫 方茂益 孙志杰 傅军 
(74)专利代理机构 北京三友知识产权代理有限
公司 11127
代理人 王涛
(51)Int.Cl.
G06Q  50/06(2012.01)
(54)发明名称
一种电力系统营配调贯通数据的处理方法
及装置
(57)摘要
本发明提供了一种电力系统营配调贯通数
据的处理方法及装置,涉及电力系统营配调贯通
技术领域。方法包括对PMS2.0系统、数据中心系
统、营销业务应用系统、基础数据平台系统以及
各系统之间的数据流转过程进行实时监控,生成
数据流转监控成果数据;根据数据流转监控成果
数据,确定数据流转监控成果数据的异常问题,
并对数据流转监控成果数据的异常问题进行定
位;对数据流转监控成果数据的异常问题进行基
量数据分析、完整性分析、一致性分析以及业务
规约分析,对数据流转监控成果数据的异常问题
进行问题分类,生成异常问题归因分类结果;根
据异常问题归因分类结果以及预先设置的问题
处理对应关系,确定各数据流转监控成果数据的
异常问题的处理对象。权利要求书6页  说明书16页  附图3页CN 106469419 A 2017.03.01
C N  106469419
A
1.一种电力系统营配调贯通数据的处理方法,其特征在于,应用于电力系统的营配调贯通数据系统,所述营配调贯通数据系统包括PMS
2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统;所述PMS2.0系统与数据中心系统连接,所述数据中心系统还与所述营销业务应用系统连接,所述营销业务应用系统还与所述基础数据平台系统连接,所述基础数据平台系统还与所述PMS2.0系统连接;
所述电力系统营配调贯通数据的处理方法,包括:
对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据;
根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位;
对所述数据流转监控成果数据的异常问题进行基量数据分析、完整性分析、一致性分析以及业务规约分析,对所述数据流转监控成果数据的异常问题进行问题分类,生成异常问题归因分类结果;
根据所述异常问题归因分类结果以及预先设置的问题处理对应关系,确定各数据流转监控成果数据的异常问题的处理对象。
2.根据权利要求1所述的电力系统营配调贯通数据的处理方法,其特征在于,所述对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据,包括:
根据kettle工具,采用日频度的方式,从PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统中抽取待监控主题相关的基础数据信息到营配调贯通数据流转监控数据库中,并根据数据抽取源和抽取系统的标准代码表,对所述标准代码表的类别代码进行数据解析处理;
将所述基础数据信息根据各统计维度进行轻量汇总数据加工;所述各统计维度包括:统计时间、数据库节点、数据单位、数据同步读取状态、数据同步异常类别;
将进行轻量汇总数据加工后的基础数据信息,根据webservice与J2EE三层体系架构技术进行数据展示,生成PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程的数据流转监控成果数据。
3.根据权利要求2所述的电力系统营配调贯通数据的处理方法,其特征在于,根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位,包括:
根据所述数据流转监控成果数据,判断在同一待监控主题的统计条件下,在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值是否一致;
若在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值不一致,则所述数据流转监控成果数据在所述待监控主题的统计条件下存在数据流转异常。
4.根据权利要求3所述的电力系统营配调贯通数据的处理方法,其特征在于,根据所述
数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位,还包括:
定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点;所述公网设备包括公网变电站、公线设备、公变设备、公网表箱接入点设备;
定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点;所述用户设备包括专线设备、专变设备。
5.根据权利要求4所述的电力系统营配调贯通数据的处理方法,其特征在于,所述定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点,包括:依次确认PMS2.0系统、数据中心系统、营销业务应用系统的数据流转监控成果数据的数据量;
若PMS2.0系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;
若数据中心系统的数据流转监控成果数据的数据量小于PMS2.0系统的数据流转监控成果数据的数据量,则确定数据中心系统的数据流转异常;
若营销业务应用系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。
6.根据权利要求5所述的电力系统营配调贯通数据的处理方法,其特征在于,所述定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点,包括:依次确认营销业务应用系统、基础数据平台系统以及PMS2.0系统的数据流转监控成果数据的数据量;
若PMS2.0系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;
若基础数据平台系统的数据流转监控成果数据的数据量小于营销业务应用系统的数据流转监控成果数据的数据量,则确定基础数据平台系统的数据流转异常;
若营销业务应用系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。
7.根据权利要求6所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行基量数据分析,包括:
判断公网设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;
若公网设备的PMS2.0系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;
判断用户设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;
若用户设备的营销业务应用系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的
数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序异常;
判断公网设备的数据中心系统的数据流转监控成果数据的数据量是否小于公网设备
的PMS2.0系统的数据流转监控成果数据的数据量;
若公网设备的数据中心系统的数据流转监控成果数据的数据量小于公网设备的PMS2.0系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;
判断用户设备的基础数据平台系统的数据流转监控成果数据的数据量是否小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量;
若用户设备的基础数据平台系统的数据流转监控成果数据的数据量小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序数据复制异常;
判断公网设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;
若公网设备的营销业务应用系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,获取数据中心系统中的第一主题明细过程表信息,确定第一主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败;
判断用户设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;
若用户设备的PMS2.0系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量,获取基础数据平台系统中的第二主题明细过程表信息,确定第二主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败。
8.根据权利要求7所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行完整性分析,包括:
根据存储过程技术,对待监控主题在营销业务应用系统和PMS2.0系统的台账关键属性进行比对校验,确定营销业务应用系统数据是否完整以及PMS2.0系统数据是否完整。
9.根据权利要求8所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行一致性分析,包括:
根据营销业务应用系统与PMS2.0系统的公网设备PMSID关联信息、用户设备业务ID关联信息,通过存储过程技术,对营销业务应用系统与PMS2.0系统的台账及关系信息的关键属性比对校验,确定数据流转监控成果数据的异常问题的一致性。
10.根据权利要求9所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行业务规约分析,包括:
对所述数据流转监控成果数据的异常问题进行图数关系异常分析、考核户变户关系异常分析以及营销原公变用户分析。
11.一种电力系统营配调贯通数据的处理装置,其特征在于,应用于电力系统的营配调贯通数据系统,所述营配调贯通数据系统包括PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统;所述PMS2.0系统与数据中心系统连接,所述数据中心系统还与所述营销业务应用系统连接,所述营销业务应用系统还与所述基础数据平台系统连接,所述基础数据平台系统还与所述PMS2.0系统连接;
所述电力系统营配调贯通数据的处理装置,包括:
实时监控单元,用于对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据;
异常问题定位单元,用于根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位;
异常问题归因分类单元,用于对所述数据流转监控成果数据的异常问题进行基量数据分析、完整性分析、一致性分析以及业务规约分析,对所述数据流转监控成果数据的异常问题进行问题分类,生成异常问题归因分类结果;
异常问题处理对象确定单元,用于根据所述异常问题归因分类结果以及预先设置的问题处理对应关系,确定各数据流转监控成果数据的异常问题的处理对象。
12.根据权利要求11所述的电力系统营配调贯通数据的处理装置,其特征在于,所述实时监控单元,具体用于:
根据kettle工具,采用日频度的方式,从PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统中抽取待监控主题相关的基础数据信息到营配调贯通数据流转监控数据库中,并根据数据抽取源和抽取系统的标准代码表,对所述标准代码表的类别代码进行数据解析处理;
将所述基础数据信息根据各统计维度进行轻量汇总数据加工;所述各统计维度包括:统计时间、数据库节点、数据单位、数据同步读取状态、数据同步异常类别;
将进行轻量汇总数据加工后的基础数据信息,根据webservice与J2EE三层体系架构技术进行数据展示,生成PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程的数据流转监控成果数据。
13.根据权利要求12所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,具体用于:
根据所述数据流转监控成果数据,判断在同一待监控主题的统计条件下,在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值是否一致;
若在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值不一致,则所述数据流转监控成果数据在所述待监控主题的统计条件下存在数据流转异常。
14.根据权利要求13所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,还用于:
定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点;所述公网设备包括公网
变电站、公线设备、公变设备、公网表箱接入点设备;
定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点;所述用户设备包括专线设备、专变设备。
15.根据权利要求14所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,还用于:

本文发布于:2024-09-20 22:25:32,感谢您对本站的认可!

本文链接:https://www.17tex.com/xueshu/757593.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:数据   系统   监控   流转   成果   问题
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议