编程问答

前端开发问题 Java开发问题 C/C++开发问题 Python开发问题 C#/.NET开发问题 php开发问题 移动开发问题 数据库问题

在 Debezium Mysql Connector 中将更多表列入白名单的有效方法

2023-04-03数据库问题

1

本文介绍了在 Debezium Mysql Connector 中将更多表列入白名单的有效方法的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着跟版网的小编来一起学习吧！

问题描述

是否有任何最佳实践可用于将新表列入 debezium mysql 连接器的白名单?

Are there any best practices that are followed for whitelisting a new table to the debezium mysql connector ?

我们正在为 CDC 流使用 debezium mysql 连接器，并且出现了一个用例，将更多表列入连接器配置的白名单.这是正在使用的 debezium 的版本详细信息和

We are using debezium mysql connector for our CDC flows and a use case has arised to whitelist more tables to the connector configuration. Here are the version details of the debezium being used and the

{
    "class": "io.debezium.connector.mysql.MySqlConnector",
    "version": "0.8.0.Final",
    "snapshot.mode": "schema_only"
}

有一张 debezium 票 https://issues.redhat.com/browse/DBZ-906 表示在

There is a debezium ticket https://issues.redhat.com/browse/DBZ-906 which indicates to run the connector in

"snapshot.mode": "schema_only_recover"

mode 并在重新启动连接器之前重新创建历史主题.我有几个关于这种方法的问题

mode and to recreate the history topic before restarting the connector. I had a couple of questions regarding this approach

这个选项是否也适用于上述版本?

如何获取在表被列入白名单之前对新表进行的更新?

Is this option available for the above mentioned version as well ?

How can I get the updates to the new table made before the table was whitelisted ?

推荐答案

首先，请升级 Debezium，因为 0.8.0 版本太旧了.

first of all, pleas eupgrade Debezium as version 0.8.0 is very old.

通常有多种方法可以解决您的问题，但如果您能负担得起流式传输的暂停时间，那么我建议您这样做1) 停止当前连接器2) 使用列入白名单的新表启动新连接器以在其上执行快照3) 快照完成后，使用更新后的白名单列表启动原始连接器

Generally there are multiple approaches to solving your issue but if you can afford a pause in streaming than I'd recommend to 1) Stop the current connector 2) Start a new connector with whitelisted new table to execute the snapshot on it 3) When snapshot is completed then start the original connector with updated whitelist table list

参见例如 https://groups.google.com/forum/?fromgroups=#!msg/debezium/Iw4BgLZ8Mq4/SZBLGwEaAQAJ;context-place=forum/debezium 了解详细信息

See for example https://groups.google.com/forum/?fromgroups=#!msg/debezium/Iw4BgLZ8Mq4/SZBLGwEaAQAJ;context-place=forum/debezium for exact details

如果您无法承受停机时间，请查看 DBZ-175 中介绍的实验方法一个>

If you cannot afford the downtime then please check the experimental approach introduced in DBZ-175

这篇关于在 Debezium Mysql Connector 中将更多表列入白名单的有效方法的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持跟版网！

The End

相关推荐

Mysql目录里的ibtmp1文件过大造成磁盘占满的解决办法

Mysql目录里的ibtmp1文件过大造成磁盘占满的解决办法

ibtmp1是非压缩的innodb临时表的独立表空间,通过innodb_temp_data_file_path参数指定文件的路径，文件名和大小，默认配置为ibtmp1:12M:autoextend，也就是说在文件系统磁盘足够的情况下，这个文件大小是可以无限增长的。为了避免ibtmp1文件无止境的暴涨导致...

2025-01-02 数据库问题

151

SQL 子句“GROUP BY 1"是什么意思?意思是?

SQL 子句“GROUP BY 1"是什么意思?意思是?

What does SQL clause quot;GROUP BY 1quot; mean?(SQL 子句“GROUP BY 1是什么意思?意思是?)...

2024-04-16 数据库问题

62

MySQL groupwise MAX() 返回意外结果

MySQL groupwise MAX() 返回意外结果

MySQL groupwise MAX() returns unexpected results(MySQL groupwise MAX() 返回意外结果)...

2024-04-16 数据库问题

13

MySQL SELECT 按组最频繁

MySQL SELECT 按组最频繁

MySQL SELECT most frequent by group(MySQL SELECT 按组最频繁)...

2024-04-16 数据库问题

16

为什么 Mysql 的 Group By 和 Oracle 的 Group by 行为不同

为什么 Mysql 的 Group By 和 Oracle 的 Group by 行为不同

Why Mysql#39;s Group By and Oracle#39;s Group by behaviours are different(为什么 Mysql 的 Group By 和 Oracle 的 Group by 行为不同)...

2024-04-16 数据库问题

13

MySQL GROUP BY DateTime +/- 3 秒

MySQL GROUP BY DateTime +/- 3 秒

MySQL GROUP BY DateTime +/- 3 seconds(MySQL GROUP BY DateTime +/- 3 秒)...

2024-04-16 数据库问题

14

热门文章

1ORA-01747: 无效的 user.table.column、table.column 或列规范 2ORA-01461: 只能为插入到 LONG 列而绑定 LONG 值-查询时发生 3INSERT 语句与 FOREIGN KEY 约束冲突 4MySql 错误:无法更新存储函数/触发器中的表，因为它已被调用此存储函数/触发器的语句使用 5MySQL:将逗号分隔的列表拆分为多行 6sqlite3 在数据库中插入和读取 BLOB 数据 7ORA-01830:日期格式图片在转换整个输入字符串之前结束/选择日期查询的总和 8MySQL 错误:UPDATE 和 LIMIT 的错误使用

热门精品源码

最新VIP资源

1多功能实用站长工具箱html功能模板 2多风格简历在线生成程序网页模板 3论文相似度查询系统源码 4响应式旅游景点宣传推广页面模板 5在线起名宣传推广网站源码 6酷黑微信小程序网站开发宣传页模板 7房产销售交易中介网站模板 8小学作业自动生成程序