全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210728321.8 (22)申请日 2022.06.24 (71)申请人 国网浙江省电力有限公司嘉兴供电 公司 地址 314000 浙江省嘉兴 市城北路9 9号 申请人 国网浙江省电力有限公司平湖市供 电公司 (72)发明人 章姝俊 赵扉 胡程平 叶炯  陈鼎 薛龙江  (74)专利代理 机构 南京汇诚信合知识产权代理 事务所(普通 合伙) 32609 专利代理师 朱凌娇 (51)Int.Cl. G06F 16/2455(2019.01) G06F 16/25(2019.01)G06F 16/27(2019.01) G06F 16/215(2019.01) (54)发明名称 海量数据 精准实时线损全量统计的方法、 系 统及存储介质 (57)摘要 本发明涉及配电网多维数据融合的技术领 域, 特别是涉及一种海量数据精 准实时线损全量 统计的方法、 系统及存储介质, 其能够实现对海 量数据的分段 实时计算, 实现对全链条的线损穿 透分析; 包括以下步骤: S1、 建立海量数据计算模 型: 响应于海量数据表的统计需求, 通过海量数 据表相应的查询专用语言建立海量数据计算模 型; S2、 获取离线统计数据和实时统计数据: 海量 数据计算模型将查询专用语言映射为海量数据 表的字段, 并对海量数据表的字段进行离线统计 和实时统计, 分别得到离线统计数据和实时统计 数据; S3、 将离线统计数据和实时统计数据进行 汇总, 得到海量数据全量统计结果; S4、 将得到的 海量数据全量数据统计结果进行 数据存储落库。 权利要求书1页 说明书3页 附图1页 CN 115544082 A 2022.12.30 CN 115544082 A 1.一种海量数据精准实时线损全量统计的方法, 其特 征在于, 包括以下步骤: S1、 建立海量数据计算模型: 响应于海量数据表的统计需求, 通过海量数据表相应的查 询专用语言 建立海量数据计算模型; S2、 获取离线统计数据和实时统计数据: 海量数据计算模型将查询专用语言映射为海 量数据表的字段, 并对海量数据表的字段进行离线统计和实时统计, 分别得到离线统计数 据和实时统计数据; S3、 将离线统计数据和实时统计数据进行汇总, 得到海量数据全量统计结果; S4、 将得到的海量数据全量数据统计结果进行 数据存储落库。 2.如权利要求1所述的一种海量数据精准实时线损全量统计的方法, 其特征在于, 所述 通过海量数据表相应的查询专用语言 建立海量数据计算模型的具体流 程为: ①、 对海量数据表中相应的查询专用语言进行各个维度的检索和 统计, 得到检索和 统 计结果; ②、 通过检索和统计结果建立海量数据计算模块。 3.如权利要求2所述的一种海量数据精准实时线损全量统计的方法, 其特征在于, 所述 对海量数据表的字段进行离线统计和实时统计具体是指: ①、 离线统计: 通过hivesql定时计算得到; ②、 实时统计: 通过查询实时接口得到 。 4.如权利要求3所述的一种海量数据精准实时线损全量统计的方法, 其特征在于, 所述 离线统计和实时统计不受各种需求的限制。 5.一种海量数据精准实时线损全量统计的系统, 其特征在于, 该系统包括模型建立模 块、 计算模块、 汇总模块和存 储模块, 其中, 模型建立模块: 用于响应于海量数据表的统计需求, 通过海量数据表相应的查询专用 语言建立海量数据计算模型; 计算模块: 用于海量数据计算模型将查询专用语言映射为海量数据表的字段, 并对海 量数据表的字段进行离线统计和实时统计, 分别得到 离线统计数据和实时统计数据; 汇总模块: 用于将离线统计数据和实时统计数据进行汇总, 得到海量数据全量统计结; 存储模块: 用于对统计的全量海量数据进行落库。 6.一种海量数据精准实时线损全量统计的存储介质, 该介质包括计算机可读存储介 质, 其存储有计算机程序, 该程序被处 理器执行时按照上述方法步骤运行。权 利 要 求 书 1/1 页 2 CN 115544082 A 2海量数据精准实时线损 全量统计的方法、 系统及存 储介质 技术领域 [0001]本发明涉及配电网多维数据 融合的技术领域, 特别是涉及一种海  量数据精准实 时线损全量统计的方法、 系统及存 储介质。 背景技术 [0002]随着配电网络迅速的发展, 配电自动化水平和监测手段的提升,  采集频次向每五 分钟一次实时数据发展, 多业务系统采集的数据量成  指数规模增长, 电力网络的规模正在 呈现指数级的增 加, 形成了配电  网大数据。 [0003]对于目前技术来说, 基于多维数据, 能够实现对线损分时分段的  计算, 但是现有 的计算模式和系统还无法满足对线损分析实时性的要  求, 还不能支撑对海量数据的分段 实时计算, 不能够对 全链条的线损  穿透分析。 发明内容 [0004]为解决上述技术问题, 本发明提供一种能够实现对海量数据的分  段实时计算, 实 现对全链条的线损穿透分析的海量数据精准实时线损  全量统计的方法、 系统及存 储介质。 [0005]本发明的一种海量数据精准实时线损全量统计的方法, 包括以下  步骤: [0006]S1、 建立海量数据计算模型: 响应于海量数据表的统计需求, 通  过海量数据表相 应的查询专用语言 建立海量数据计算模型; [0007]S2、 获取离线统计数据和实时统计数据: 海量数据计算模型将查  询专用语言映射 为海量数据 表的字段, 并对海量数据 表的字段进 行离 线统计和实时统计, 分别得到离线统 计数据和实时统计数据; [0008]S3、 将离线统计数据和实时统计数据进行汇总, 得到海量数据全  量统计结果; [0009]S4、 将得到的海量数据全量数据统计结果进行 数据存储落库。 [0010]本发明的一种海量数据精准实时线损全量统计的方法, 所述通过  海量数据表相 应的查询专用语言 建立海量数据计算模型的具体流 程 为: [0011]①、 对海量数据表中相应的查询专用语言进行各个维度的检索和  统计, 得到检索 和统计结果; [0012]②、 通过检索和统计结果建立海量数据计算模块。 [0013]本发明的一种海量数据精准实时线损全量 统计的方法、 系统及存  储介质, 所述对 海量数据表的字段进行离线统计和实时统计具体是  指: [0014]①、 离线统计: 通过hivesql定时计算得到; [0015]②、 实时统计: 通过查询实时接口得到 。 [0016]本发明的一种海量数据精准实时线损全量统计的方法, 所述离线  统计和实时统 计不受各种需求的限制。 [0017]本发明的一种海量数据精准实时线损全量 统计的系统, 其特征在  于, 该系统包括 模型建立模块、 计算模块、 汇总模块和存 储模块, 其 中,说 明 书 1/3 页 3 CN 115544082 A 3

PDF文档 专利 海量数据精准实时线损全量统计的方法、系统及存储介质

文档预览
中文文档 6 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共6页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 海量数据精准实时线损全量统计的方法、系统及存储介质 第 1 页 专利 海量数据精准实时线损全量统计的方法、系统及存储介质 第 2 页 专利 海量数据精准实时线损全量统计的方法、系统及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 01:01:38上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。