我非常高兴地宣布 Debezium 1.2.0.Final 发布!

在过去的三个月里,社区解决了近 200 个问题。此版本的主要功能包括:

  • 用于基于内容的事件 路由过滤 的新 Kafka Connect 单条消息转换 (SMTs);升级到 Apache Kafka 2.5

  • Debezium SQL Server、Db2Oracle 连接器的模式更改 topic

  • Debezium 嵌入式引擎中对 SMT 和消息转换器的支持

  • Debezium Server,一个全新的运行时,允许将数据更改事件传播到各种消息基础设施,如 Amazon Kinesis、Google Cloud Pub/Sub 和 Apache Pulsar

  • 一种新的列掩码模式“一致性哈希”,允许在匿名化列值的同时保持它们的可关联性

  • MongoDB 连接器的新指标

  • SQL Server 连接器的改进重连能力

Debezium 服务器

如果让我挑选一个最让我兴奋的功能,那一定是 Debezium Server。它让更多的用户能够受益于开源的变更数据捕获 (CDC),无论他们使用的是何种消息基础设施。能够通过 Kinesis 和 Pub/Sub 等托管服务传播 Debezium 数据变更事件,是我们一遍又一遍从社区收到的功能请求,看到这个功能最终成为现实真是太棒了。

Debezium Server 也将为将 Debezium 作为原生的 Knative Eventing 事件源而提供坚实的基础,您很快就会看到该领域更多令人兴奋的进展。有了 Debezium Server,运行 Debezium 现在有 三种方式

  • 通过 Kafka Connect,利用其出色的连接器生态系统,设置与 Apache Kafka 的低延迟数据流管道。

  • 通过 Debezium Server,将数据变更事件发送到越来越多的消息平台,例如 Kinesis。

  • 通过 Debezium Engine,将其作为库嵌入到自定义的基于 JVM 的应用程序中,例如用于更新嵌入式缓存等用例。

我为这给 Debezium 社区带来的所有机会感到非常兴奋。Debezium Server 由创新的 Quarkus 框架驱动,这同样开启了许多有趣的技术可能性。例如,我们可以探索通过 GraalVM 将 Debezium 连接器作为原生二进制文件运行,从而大大降低内存消耗,这对于云环境来说可能是一个非常有趣的部署选项。

非常感谢社区!

请参阅原始公告(Alpha1Beta1Beta2CR1)以了解 Debezium 1.2 的所有新功能。您可以在 发布说明 中找到已解决问题的完整列表、升级过程以及任何向后兼容性更改的说明。

开源项目离不开其用户和贡献者社区;非常感谢社区以下为 Debezium 1.2 版本做出贡献的人们:

这使得 Debezium 主要代码仓库的总贡献者人数超过 200 人!

展望

让我们以对未来展望来结束这篇博文。我们将坚持每季度发布一次的节奏,即您可以在 9 月底期待 Debezium 1.3 的发布,期间每三周将有预览版本发布。

我们目前正在更新下一版本的 路线图,非常欢迎您对此提出意见和反馈!我们目前计划的内容包括:更灵活的快照选项(重新快照特定表、过滤变更、并行快照等),将 Db2 连接器移出孵化状态,以及探索正式支持 MariaDB 所需的工作。

继续前进,不断向上!

Gunnar Morling

Gunnar 是一位软件工程师,内心是一个开源爱好者,目前在 Confluent 担任技术专家。此前,他曾帮助构建一个基于 Apache Flink 的实时流处理平台,并领导了 Debezium 项目,这是一个用于变更数据捕获的分布式平台。他是 Java Champion,并创立了多个开源项目,如 JfrUnit、kcctl 和 MapStruct。Gunnar 是一位热情的博主 (morling.dev),并曾在 QCon、Java One 和 Devoxx 等各种会议上发表演讲。他居住在德国汉堡。

   


关于 Debezium

Debezium 是一个开源的分布式平台,可以将现有数据库转变为事件流,使应用程序能够几乎即时地看到并响应数据库中已提交的每个行级更改。Debezium 构建在 Kafka 之上,并提供了 Kafka Connect 兼容的连接器,用于监控特定的数据库管理系统。Debezium 将数据更改的历史记录在 Kafka 日志中,这样您的应用程序可以随时停止和重新启动,并可以轻松地消费在未运行时错过的所有事件,确保所有事件都被正确且完整地处理。Debezium 在 Apache 许可证 2.0 下是 开源 的。

参与进来

我们希望您觉得 Debezium 有趣且有用,并希望尝试一下。在 Twitter @debezium 上关注我们,在 Zulip 上与我们聊天,或加入我们的 邮件列表 与社区交流。所有代码都在 GitHub 上开源,因此请在本地构建代码,帮助我们改进现有连接器并添加更多连接器。如果您发现问题或有改进 Debezium 的想法,请告诉我们或 记录一个问题

版权所有 © Debezium 及其作者。保留所有权利。有关我们的商标详情,请访问我们的 商标政策商标列表。第三方商标属于其各自所有者,在此提及并不表示任何认可或关联。
×