Debezium系列之：支持数据库ddl和dml数据发往同一个Kafka Topic

创始人

2024-03-24 02:32:15

Debezium系列之：支持数据库ddl和dml数据发往同一个Kafka Topic

一、需求背景
二、实现方案
三、参数详解
四、具体实现
五、修改表结构和插入数据
六、消费topic

一、需求背景

业务同步数据库数据到kafka topic，下游消费kafka topic到另外的数据库，源数据库部分表结构变化比较频繁，希望数据库的ddl和dml数据能够发往同一个kafka topic，当获取到ddl数据时，就自动修改目标数据库表结构，再处理后续的dml数据

二、实现方案

需要保证顺序一致性，kafka topic可以采用单分区
基于SMT实现把存储ddl数据的topic和存储dml数据的topic中的数据都发往同一个Kafka topic

三、参数详解

详细了解SMT技术博客如下所示：

上一篇：独立站的免费流量玩法

下一篇：搞安全方向需要哪些技术基础和技能？

相关内容

热门资讯

分辨真假!德扑之星辅助挂多功能... 分辨真假!德扑之星辅助挂多功能透视工具，一直存在有挂(有挂透明挂)小薇（辅助器软件下载）致您一封信；...

重大通报!WPK辅助挂多功能透... 重大通报!WPK辅助挂多功能透视工具，一直有挂(确实有挂)重大通报!WPK辅助挂多功能透视工具，一直...

今日焦点!wepoker辅助挂... 今日焦点!wepoker辅助挂多功能透视工具，其实存在有挂(有挂透视)1、不需要AI权限，帮助你快速...

一分钟揭秘!AAPoKer辅助... 一分钟揭秘!AAPoKer辅助挂多功能透视工具，竟然存在有挂(有挂解密)1、下载好AAPoKer脚本...

最新通报!德扑之星辅助挂多功能... 最新通报!德扑之星辅助挂多功能透视工具，一直是真的有挂(有挂讲解)1、下载好德扑之星正确养号方法之后...