金融行业标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211397583.7 (22)申请日 2022.11.09 (71)申请人 国网河北省电力有限公司经济技 术 研究院 地址 050000 河北省石家庄市裕华区富强 大街27号 申请人 国家电网有限公司 (72)发明人 胡诗尧 柴林杰 荆志朋 申永鹏  王中亮 郝军魁 林榕 容春艳  高立坡 郭佳 李腾 张德广  程蓉  (74)专利代理 机构 石家庄国为知识产权事务所 13120 专利代理师 张罗涛(51)Int.Cl. G06F 16/215(2019.01) G06F 16/36(2019.01) G06Q 50/06(2012.01) (54)发明名称 电网监控数据处理方法、 装置、 设备及存储 介质 (57)摘要 本发明提供了一种电网监控 数据处理方法、 装置、 设备及存储介质, 首先获取包括第一结构 化数据和非结构化数据; 然后将非结构化数据转 化为半结构化数据, 并根据第一知识图谱确定第 一结构化数据和半结构化数据的第一相关系数; 接着选取第一相关系数大于第一预设阈值的第 一结构化数据, 组成第一数据组; 再将半结构化 数据全部转化为第二结构化数据; 最终根据第二 结构化数据和第一数据组, 确定并去除重复性数 据。 通过对比半结构化数据的特征信息与第一结 构化数据之间的相关性, 从而将可能重复的半结 构化数据与第一结构化数据关联, 最终在半结构 化数据化为结构化数据后, 对关联的数据进行重 复性筛除, 从而避免数据重复造成存储资源和处 理资源的浪费。 权利要求书2页 说明书8页 附图3页 CN 115543990 A 2022.12.30 CN 115543990 A 1.一种电网监控数据处 理方法, 其特 征在于, 包括: 获取电网监控数据; 其中, 所述电网监控数据包括第一结构化数据和非结构化数据; 将非结构化数据转化为半结构化数据, 并根据预先建立的第一知识图谱, 确定所述第 一结构化数据和所述半结构化数据之间的第一相关系数; 针对每个半结构化数据, 选取与 该半结构化数据之间的第 一相关系数大于第 一预设阈 值的第一结构化数据, 组成该半结构化数据的第一数据组; 将半结构化数据全部转 化为第二结构化数据; 根据第二结构化数据和第一数据组中的第一结构化数据, 确定并去 除重复性数据, 以 完成数据处 理。 2.根据权利要求1所述的电网监控数据处理方法, 其特征在于, 所述根据第 二结构化数 据和第一数据组中的第一结构化数据, 确定并去除重复性数据, 包括: 将每个半结构化数据对应的第二结构化数据与该半结构化数据对应的第一数据组中 的第一结构化数据进行对比, 确定并去除重复性数据。 3.根据权利要求2所述的电网监控数据处理方法, 其特征在于, 在将每个半结构化数据 对应的第二结构化数据与该半结构化数据对应的第一数据组中的第一结构化数据进行对 比, 确定并去除重复性数据之后, 所述方法还 包括: 根据第二结构化数据的数目、 第一结构化数据的数目以及重复性数据的数目, 计算各 个第一数据组的组内重复率; 根据各个第 一数据组 的组内重复率以及预设重复率阈值, 确定所述电网监控数据的处 理有效性; 当所述电网监控数据的处理有 效性为低时, 分别将每个第 二结构化数据与每个第 一结 构化数据进行 再次对比, 得到对比结果; 根据所述对比结果更新所述第一知识图谱。 4.根据权利要求1所述的电网监控数据处理方法, 其特征在于, 在针对每个半结构化数 据, 选取与该半结构化数据之间的第一相关系 数大于第一预设阈值的第一结构化数据, 组 成该半结构化数据的第一数据组之后, 所述方法还 包括: 根据预先建立的第二知识图谱, 确定各个半结构化数据之间的第二相关系数; 针对每个半结构化数据, 当另一个半结构化数据与该半结构化数据之间的第 二相关系 数大于预设阈值时, 将所述另一个半结构化数据的第一数据组标记为该半结构化数据的相 邻第一数据组; 所述根据第二结构化数据和第一数据组中的第一结构化数据, 确定并去除重复性数 据, 包括: 将每个半结构化数据对应的第二结构化数据分别与该半结构化数据对应的第一数据 组中的第一结构化数据, 以及该半结构化数据的相邻第一数据组中的第一结构化数据进 行 对比, 确定并去除重复性数据。 5.根据权利要求1所述的电网监控数据处理方法, 其特征在于, 所述将 非结构化数据转 化为半结构化数据, 包括: 获取所述非结构化数据的类型; 根据所述非结构化数据的类型和每种类型对应的识别模型, 提取所述非结构化数据的权 利 要 求 书 1/2 页 2 CN 115543990 A 2特征信息; 根据所述非结构化数据的特 征信息, 将所述非结构化数据转 化为半结构化数据。 6.根据权利要求5所述的电网监控数据处理方法, 其特征在于, 所述非结构化数据的类 型包括下述至少一项: 视频、 图片、 语音、 电子文本; 所述识别模型包括第一神经网络模型和 第二神经网络模型; 根据所述非结构化数据的类型和每种类型对应的识别模型, 提取所述非结构化数据的 特征信息, 包括: 当所述非结构化数据的类型为视频或图片时, 根据 所述第一神经网络模型提取所述非 结构化数据的特 征信息; 当所述非结构化数据的类型为语音或电子文本时, 根据 所述第二神经网络模型提取所 述非结构化数据的特 征信息。 7.根据权利要求1 ‑6任一项所述的电网监控数据处理方法, 其特征在于, 将半结构化数 据全部转 化为第二结构化数据, 包括: 对所述半结构化数据进行并行处 理; 利用XML技术将所述并行处 理后的半结构化数据转 化为所述第二结构化数据。 8.一种电网监控数据处 理装置, 其特 征在于, 包括: 获取模块, 用于获取电网监控数据; 其中, 所述电网监控数据包括第 一结构化数据和非 结构化数据; 确定模块, 用于将非结构化数据转化为半结构化数据, 并根据预先建立的第一知识图 谱, 确定所述第一结构化数据和所述半结构化数据之间的第一相关系数; 分组模块, 用于针对每个半结构化数据, 选取与该半结构化数据之间的第一相关系数 大于第一预设阈值的第一结构化数据, 组成该半结构化数据的第一数据组; 转化模块, 用于将半结构化数据全部转 化为第二结构化数据; 去重模块, 用于根据第二结构化数据和第一数据组中的第一结构化数据, 确定并去 除 重复性数据, 以完成数据处 理。 9.一种电子设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器上 运行的计算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如上的权利要求 1 至7中任一项所述电网监控数据处 理方法的步骤。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质存储有计算机程 序, 所述计算机程序被处理器执行时实现如上的权利要求 1至7中任一项 所述电网监控数据 处理方法的步骤。权 利 要 求 书 2/2 页 3 CN 115543990 A 3

PDF文档 专利 电网监控数据处理方法、装置、设备及存储介质

文档预览
中文文档 14 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共14页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 电网监控数据处理方法、装置、设备及存储介质 第 1 页 专利 电网监控数据处理方法、装置、设备及存储介质 第 2 页 专利 电网监控数据处理方法、装置、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 00:58:58上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。