我非常高兴地宣布 Debezium 1.7.0.CR1 的发布!
在此版本中,我们重新设计了快照期间处理列过滤器的方式,Debezium 容器镜像已更新为使用 Fedora 34 作为其基础,支持 MySQL INVISIBLE 列,以及更多内容。
快照期间的列过滤
尽管不同的 Debezium 连接器已经具备了将捕获表中的特定列排除在更改事件之外的能力,但这些过滤器仅在连接器处理数据时应用。对于初始快照,现在实现了一种更有效的方法:将执行定制的 SQL SELECT 语句来仅获取实际包含的列(DBZ-2525)。这允许在排除大型 BLOB 列等情况下的更改事件时,显著提升性能。
更新了容器镜像基础
适用于 Apache Kafka、Kafka Connect 和 Apache ZooKeeper 的 Debezium 容器镜像基于 Fedora 34 最小容器基础镜像(DBZ-3939)。此更改是必要的,因为之前使用的基础镜像(源自 CentOS 7)已不再维护。虽然此更改对大多数 Debezium 用户来说是透明的,但对于那些从 Debezium 镜像派生自己自定义镜像的用户,可能需要进行一些调整,例如在使用操作系统包管理器安装其他软件包时。有关更多详细信息,请参阅发布说明。
其他修复
随着我们接近 1.7 最终版,大部分更改都集中在错误修复和代码库成熟方面。一些已解决的问题包括:
总而言之,此版本已修复了47 个问题。非常感谢所有贡献者:Anisha Mohanty、Ashmeet Lamba、Bob Roldan、Camile Sing、Chris Cranford、Dhrubajyoti G、Gunnar Morling、Harvey Yue、Hussain Ansari、Indra Shukla、Jakub Cechacek、Jiabao Sun、Jiri Novotny、Jiri Pechanec、Katerina Galieva、René Kerner 和 Yuan Zhang。
展望未来,我们计划在几天内发布另一个 CR(候选版本),然后在月底发布 Debezium 1.7.0.Final。我们将主要专注于错误修复和一些精选的性能优化。Debezium UI 也会有一些令人兴奋的改进,这些改进应该会在 1.7 最终版完成:支持单消息转换(SMT)的配置,以及配置主题创建设置的功能。
同时,我们正在为计划在年底发布的 Debezium 1.8 制定路线图。如果您想为这个版本提出特定的功能请求,请在下方的评论区或在邮件列表中联系我们。
关于 Debezium
Debezium 是一个开源的分布式平台,可以将现有数据库转变为事件流,使应用程序能够几乎即时地看到并响应数据库中已提交的每个行级更改。Debezium 构建在 Kafka 之上,并提供了 Kafka Connect 兼容的连接器,用于监控特定的数据库管理系统。Debezium 将数据更改的历史记录在 Kafka 日志中,这样您的应用程序可以随时停止和重新启动,并可以轻松地消费在未运行时错过的所有事件,确保所有事件都被正确且完整地处理。Debezium 在 Apache 许可证 2.0 下是 开源 的。