(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210928255.9 (22)申请日 2022.08.03 (71)申请人 上海华能电子商务有限公司 地址 201208 上海市浦东 新区陆家嘴路6 6 号招商大厦24层01单 元 申请人 华能集团技 术创新中心有限公司 (72)发明人 蔡洪旺　郭新昱　孙守虎　谢世安　 梁永吉　杨焰　迟玉翠　郑伟　 孙小函　蔡祥　 (74)专利代理 机构 上海科盛知识产权代理有限 公司 312 25 专利代理师 应小波 (51)Int.Cl. G06F 16/27(2019.01) G06F 16/21(2019.01)G06F 16/25(2019.01) G06F 11/30(2006.01) G06F 9/445(2018.01) G06F 11/32(2006.01) (54)发明名称 基于BS架构且基础组件可自主扩展的异构 数据处理系统 (57)摘要 本发明涉及一种基于BS架构且基础组件可 自主扩展的异构数据处理系统， 包括源库、 Uxsync工作台和目标库， 其特征在于， 该系统还 包括processor处理集群， 所述的processor处理 集群配置于Uxsync工作台上， 用于接收处理源库 的数据流并输入至目标库； 所述的processor处 理集群包括数据拉取组件、 数据处理组件和数据 输入组件， 各所述组件通过组合使用以完成数据 同步或数据迁移的需求。 与现有技术相比， 本发 明具有可视化、 灵活性高、 开发成本低、 非侵入式 等优点。 权利要求书1页 说明书3页 附图1页 CN 115248830 A 2022.10.28 CN 115248830 A 1.一种基于BS架构且基础组件可自主扩展 的异构数据处理系 统， 包括源库、 Uxsync工 作台和目标库， 其特征在于， 该系统还包括processor处理集群， 所述的processor处理集群 配置于Uxsync工作台上， 用于接收处理源库的数据流并输入至目标库； 所述的pr ocessor处 理集群包括数据拉取组件、 数据 处理组件和数据输入组件， 各所述组件通过组合使用以完 成数据同步或数据迁移的需求。 2.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的数据拉取组件用于从源库拉取数据， 所述的数据拉取 组件的参数根 据源库类型进行配置 。 3.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的数据 处理组件， 用于对数据进行特殊处理， 支持不同结构的异构数 据同步以及迁移。 4.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的数据输入组件， 用于将处 理完成的数据输入目标库。 5.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的pr ocessor处理集群通过在Uxsync工作台上拉取 组件的方式配置完 成。 6.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的processor处理集群中的工作方式包括每个processor单独执行一 组迁移策略和多个proces sor共同执 行一组迁移策略。 7.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的proces sor集群可并发处 理工作流， 支持高可用部署。 8.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的Uxsync 工作台提供 前端交互， 负责监控目标proces sor的运行状态。 9.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的Uxsync 工作台提供图形化的监控， 用于查看迁移或同步的数据量。 10.根据权利要求1所述的一种基于BS架构且基础组件可自主扩展的异构数据处理系 统， 其特征在于， 所述的Uxsync工作台完成processor配置工作流后， 用户需手动启动工作 流， 进行数据同步或者数据迁移工作。权　利　要　求　书 1/1 页 2 CN 115248830 A 2基于BS架构且基础组件可自主扩展的异构数据处理系统 技术领域 [0001]本发明涉及数据库同步领域， 尤其是涉及一种基于BS架构且基础组件可自主扩展 的异构数据处 理系统。 背景技术 [0002]随着信息化建设的逐步演进， 一些大型的企业， 常有许多分支机构， 由于工作的侧 重点不同， 各个分支机构可能使用不同的数据库管理系统来管理数据， 这些数据库往往存 在很大的差异， 也就是说， 这些数据库的异构性表现在多个方面， 如数据的类型不同， 数据 的表示不同， 管理数据的软件不同， 以及系统运行的环境不同。 随着企业电子化的发展， 许 多信息系统需要访问这些异构数据库中的数据， 进行 大量的信息交换。 [0003]但是在不改变原有企业信息系统架构的情况下， 对这些数据进行处理， 往往需要 进行大量的数据迁移和数据同步工作， 这些工作需要企业投入大量的成本开发， 且面临数 据混淆的风险。 发明内容 [0004]本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种可视化、 灵 活性 高、 开发成本低、 非侵入式的基于BS架构且基础组件可自主扩展的异构数据处 理系统。 [0005]本发明的目的可以通过以下技 术方案来实现： [0006]根据本发明的一个方面， 提供了一种基于BS架构且基础组件可自主扩展的异构数 据处理系统， 包括源库、 Uxsync(优炫数据同步工具)工作台和目标库， 该系统还包括 processor(处理器， 优炫数据同步工具的最小流式处理单元)处理集群， 所述的processor 处理集群配置于Uxsync工作台上， 用于接收处理源库的数据流并输入至目标库； 所述的 processor处理集群包括数据拉取组件、 数据处理组件和数据输入组件， 各所述组件通过组 合使用以完成数据同步或数据迁移的需求。 [0007]作为优选 的技术方案， 所述的数据拉取组件用于从源库拉取数据， 所述的数据拉 取组件的参数根据源库类型进行配置 。 [0008]作为优选的技术方案， 所述的数据处理组件， 用于对数据进行特殊处理， 支持不同 结构的异构数据同步以及迁移。 [0009]作为优选的技 术方案， 所述的数据输入组件， 用于将处 理完成的数据输入目标库。 [0010]作为优选的技术方案， 所述的processor处理集群通过在Uxsync工作台上拉取组 件的方式配置 完成。 [0011]作为优选的技术方案， 所述的processor处理集群中的工作方式包括每个 processor单独执 行一组迁移策略和多个proces sor共同执 行一组迁移策略。 [0012]作为优选的技术方案， 所述的processor集群可并发处理工作流， 支持高可用部 署。 [0013]作为优选的技术方案， 所述的Uxsync工作台提供前端交互， 负责监控目标说　明　书 1/3 页 3 CN 115248830 A 3