公开(公告)号：CN118916431B

公开(公告)日：2025-02-28

申请号：CN202411425740.X

申请日：2024-10-14

Applicant: 山东省城市商业银行合作联盟有限公司

Inventor： 谢峰 ,  陈瑞金 ,  王士交 ,  冯占海

IPC: G06F16/27 ,  G06F16/21 ,  G06F16/22 ,  G06F16/215 ,  G06F16/2458

Abstract: 本发明公开了一种GoldenDB数据库的数据采集方法、系统、设备及介质，涉及数据库采集技术领域。方法包括：新建采集集群，基于所述采集集群的服务，完成GoldenDB数据库集群的数据库binlog日志的捕捉与整合，在所述采集集群的各采集节点上生成一份单数据库节点可回流的数据库日志；启动数据分发平台KAFKA集群服务，接收数据融合平台采集过程中所产生的实时变化数据；启动所述数据融合平台的服务，在所述采集集群节点的数据库日志中检索解析所述实时变化数据，将所述实时变化数据推送至数据分发平台KAFKA集群供下游消费。提供了一种易于操作、适用范围较为广泛的GoldenDB数据库表级数据准实时采集的方法及系统，填补GoldenDB数据库这一细分领域的空白。

公开(公告)号：CN115525656A

公开(公告)日：2022-12-27

申请号：CN202211226962.X

申请日：2022-10-08

Applicant: 山东省城市商业银行合作联盟有限公司

Inventor： 王振 ,  张荣亮 ,  陈瑞金 ,  王士交 ,  冯占海 ,  倪俊甜 ,  马长明 ,  朱海涛 ,  杜淑娟

IPC: G06F16/22 ,  G06F16/23 ,  G06F16/27 ,  G06N20/00

Abstract: 本发明提供了一种在线变更表结构的方法及系统，方法包括响应于表结构的变更指令，进入变更初始化阶段，初始化表变更过程中数据移动所需要的目标表、登台表和源表触发器；基于预设的最优参数及变更信息，将源表中的数据分批复制至所述目标表中；在重写结束或达到重写阈值后，将源表脱机，通过分布式数据库交互源表和目标表的名称，将目标表联机，完成表结构变更。本发明利用分布式数据库DB2的AMT特性实现在线变更表结构，通过机器学习，自动生成配置参数数据，优化并减少数据库表结构变更操作的时间，减少关键路径上的作业耗时，提高系统业务连续性及系统可用率，减少表变更耗时长对核心系统的影响。

公开(公告)号：CN118916431A

公开(公告)日：2024-11-08

申请号：CN202411425740.X

申请日：2024-10-14

Applicant: 山东省城市商业银行合作联盟有限公司

Inventor： 谢峰 ,  陈瑞金 ,  王士交 ,  冯占海

IPC: G06F16/27 ,  G06F16/21 ,  G06F16/22 ,  G06F16/215 ,  G06F16/2458

Abstract: 本发明公开了一种GoldenDB数据库的数据采集方法、系统、设备及介质，涉及数据库采集技术领域。方法包括：新建采集集群，基于所述采集集群的服务，完成GoldenDB数据库集群的数据库binlog日志的捕捉与整合，在所述采集集群的各采集节点上生成一份单数据库节点可回流的数据库日志；启动数据分发平台KAFKA集群服务，接收数据融合平台采集过程中所产生的实时变化数据；启动所述数据融合平台的服务，在所述采集集群节点的数据库日志中检索解析所述实时变化数据，将所述实时变化数据推送至数据分发平台KAFKA集群供下游消费。提供了一种易于操作、适用范围较为广泛的GoldenDB数据库表级数据准实时采集的方法及系统，填补GoldenDB数据库这一细分领域的空白。