← 返回列表
一种可扩展的CDC方式达梦数据库同步系统及其应用
申请人信息
- 申请人:广州睿帆科技有限公司
- 申请人地址:510000 广东省广州市南沙区南沙街金隆路37号901-907房
- 发明人: 广州睿帆科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种可扩展的CDC方式达梦数据库同步系统及其应用 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410194386.8 |
| 申请日 | 2024/2/22 |
| 公告号 | CN117763051A |
| 公开日 | 2024/3/26 |
| IPC主分类号 | G06F16/27 |
| 权利人 | 广州睿帆科技有限公司 |
| 发明人 | 王海军; 郑成伟; 陈彬 |
| 地址 | 广东省广州市南沙区南沙街金隆路37号901-907房 |
摘要文本
本发明提供了一种可扩展的CDC方式达梦数据库同步系统及其应用,其系统包括:多个采集组件用于实时采集达梦数据库的变更数据发送至kafka中;任务管理中心用于将用户提交的变更数据采集任务分发至采集组件,并维护采集组件所有运行中的变更数据采集任务;任务运行状态存储模块用于存储各个变更数据采集任务的任务运行状态信息入库组件用于通过不同的入库连接器连接采集组件中的kafka,将变更数据同步到不同的异构数据库或存储引擎。实现了多个达梦数据库节点的不同变更数据地采集以及同步,并在采集任务数量发生变化时,自动进行采集组件的启动或者下线,保证在任务过多时资源的充足,或者在任务减少时采集资源的不浪费。。来源:百度马 克 数据网
专利主权项内容
1.一种可扩展的CDC方式达梦数据库同步系统,其特征在于,包括:多个采集组件、任务管理中心、任务运行状态存储模块以及入库组件,其中,采集组件,用于实时采集达梦数据库的变更数据发送至kafka中,并将变更数据采集任务的任务运行状态信息上报至数据任务运行状态存储模块中;其中,每个采集组件同时执行多个变更数据采集任务;任务管理中心,用于将用户提交的变更数据采集任务分发至采集组件,并维护采集组件所有运行中的变更数据采集任务;任务运行状态存储模块,用于存储各个变更数据采集任务的任务运行状态信息;入库组件,用于通过不同的入库连接器连接采集组件中的kafka,将采集组件采集到的变更数据同步到不同的异构数据库或存储引擎。