(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210885413.7 (22)申请日 2022.07.26 (71)申请人 国家能源集团江苏电力有限公司 地址 210017 江苏省南京市 鼓楼区集庆门 大街272号2幢37 F 申请人 国能信控互联技 术有限公司 (72)发明人 潘玉松　马天霆　徐成　罗治斌　 丁建伟　秦宁　祝敬伟　付兴　 黄玉林　顾舒　 (74)专利代理 机构 北京智绘未来专利代理事务 所(普通合伙) 11689 专利代理师 肖继军　王萍 (51)Int.Cl. G06F 16/215(2019.01) G06F 16/25(2019.01)G06F 16/28(2019.01) G06Q 10/06(2012.01) G06Q 50/06(2012.01) (54)发明名称 基于ETL技术的火电厂多类型数据调配方法 及系统 (57)摘要 本发明公开了一种基于ETL技术的火电厂多 类型数据调配方法及系统， 通过数据采集终端获 取各个系统的数据； 将获取的各个系统数据经过 ETL预处理并分类存储； 根据任务指令获取任务 流程图， 存储任务流程图； 根据任务流程图顺序 调用涉及的各个系统数据， 并按任务流程图顺序 组合计算任务指令。 ET L预处理具体为： 对获得的 各个系统数据进行增量抽取； 对抽取的数据进行 清洗， 去除包括不完整、 错误、 重复的数据； 将清 洗后的数据进行标准统一化处理， 按照采集终端 以及数据类型进行拆分； 将拆分完成的数据存入 数据库内对应表中。 本发明通过ETL技术将相互 独立的系统中数据统一化， 可跨系统调用； 利用 任务流程图， 使运 算过程简单且易于扩 展。 权利要求书2页 说明书5页 附图1页 CN 115309729 A 2022.11.08 CN 115309729 A 1.一种基于 ETL技术的火电厂 多类型数据调配方法， 其特 征在于， 所述方法包括 步骤： 步骤1， 通过 数据采集终端获取 各个系统的数据； 步骤2， 将获取的各个系统数据经 过ETL预处 理， 并将处 理后的数据分类存 储； 步骤3， 根据任务指令获取任务 流程图； 步骤4， 存 储任务流程图； 步骤5， 根据任务流程图顺序调用涉及的各个系统 的数据， 并按任务流程图顺序组合计 算任务指令 。 2.根据权利要求1所述的基于 ETL技术的火电厂 多类型数据调配方法， 其特 征在于， 所述步骤1中， 数据包括时序数据和关系型 数据。 3.根据权利要求2所述的基于 ETL技术的火电厂 多类型数据调配方法， 其特 征在于， 所述步骤2中， ETL预处 理具体步骤为： S21、 对获得的各个系统数据进行增量抽取； S22、 对抽取的数据进行清洗， 去除包括 不完整、 错 误、 重复的数据； S23、 将清洗后的数据进行 标准统一 化处理， 按照采集终端以及数据类型进行拆分； S24、 将拆分完成的数据存 入数据库内对应的表中。 4.根据权利要求1所述的基于 ETL技术的火电厂 多类型数据调配方法， 其特 征在于， 所述步骤3中， 根据任务指令获取任务 流程图具体步骤为： S31、 分析获得的任务指令， 判断是否有能调用的任务 流程图； S32、 若是， 调用任务流程图， 判断调用的任务流程图是否能够完成指令代表的任务； 若 是， 输出任务 流程图； 若否， 在调用的任务 流程图的基础上生成完整的任务 流程图； S33、 若否， 按照任务指令生成业 务流程图。 5.根据权利要求1所述的基于 ETL技术的火电厂 多类型数据调配方法， 其特 征在于， 所述步骤4中， 判断获得的任务 流程图是否被保存， 若是， 则放弃保存； 若否， 进行保存。 6.一种基于ETL技术的火电厂多类型数据调配系统， 其特征在于， 所述系统包括数据采 集模块、 数据处 理模块、 任务处 理模块、 任务存 储模块； 数据采集模块， 通过各个数据采集终端获取各个系统的数据， 并将采集的实时数据传 输给数据处理模块； 数据处理模块， 将接收的不同系统的数据进行 标准统一 化处理， 并分类存 储； 任务处理模块， 按照获得的任务指令生成任务流程图， 并按照任务流程图顺序调用涉 及的各个系统中的数据， 进行任务 运算； 任务存储模块， 存储生成的任务 流程图。 7.根据权利要求6所述的基于 ETL技术的火电厂 多类型数据调配系统， 其特 征在于， 数据包括时序数据和关系型 数据； 时序数据来自发电系统中包括锅炉系统、 风烟系统、 汽水系统、 电气系统、 制粉系统、 辅 机系统在内的实时数据监控系统； 关系型数据来自发电系统中OA系统、 物资系统、 检修系统、 维修系统、 两票系统、 巡点检 系统、 设备故障预警/报警系统、 绩效考核系统、 安全管理系统。 8.根据权利要求6所述的基于 ETL技术的火电厂 多类型数据调配系统， 其特 征在于， 所述数据处理模块采用ETL预处理， 对采集的数据进行抽取、 清洗、 标准统一化处理， 然权　利　要　求　书 1/2 页 2 CN 115309729 A 2后按照数据采集终端以及数据类型将数据分类存 储于对应的表中。 9.根据权利要求8所述的基于 ETL技术的火电厂 多类型数据调配系统， 其特 征在于， 时序数据来源于锅炉系 统、 风烟系统、 汽水系统、 电气系 统、 制粉系统、 辅机系统， 分别 形成对应的锅炉模块数据表、 风烟模块数据表、 汽水模块数据表、 电气模块数据表、 制粉模 块数据表、 辅 机模块数据表； 关系型数据来源于OA系 统、 物资系 统、 检修系统、 维修系 统、 两票系 统、 巡点检系 统、 设 备故障预警/报警系统、 绩效考核系统、 安全管理系统， 分别 形成对应的OA模块、 物资模块、 检修模块、 维修模块、 两票模块、 巡点检模块、 设备故障预警/报警模块、 绩效考核模块、 安全 管理模块的数据表。 10.根据权利要求6所述的基于 ETL技术的火电厂 多类型数据调配系统， 其特 征在于， 所述任务处理模块根据获得的指令， 判断是否存在能调用的任务流程图； 若是， 从所述 任务存储模块调用任务流程图， 并判断调用的任务流程图是否能够完成指令代表的任务， 若能够完成指 令代表的任务， 输出任务流程图， 若不能够完成指令代表的任务， 按照 指令在 调用的流程图的基础上生成完整的任务流程图； 若否， 按照指令以及预先设定的规则生成 任务流程图。权　利　要　求　书 2/2 页 3 CN 115309729 A 3