我很高兴地宣布 Debezium 1.6.0.Beta2 的发布!

此版本为 Debezium Server 添加了 Pravega 支持,扩展了 Debezium Oracle 连接器的快照选项,并为不同的 Debezium 连接器提供了一系列错误修复和其他改进。

Pravega 对 Debezium Server 的支持

通过 Debezium Server,我们的使命是为所有用户带来开源的变更数据捕获,无论他们使用何种数据流平台或提交日志。因此,我们非常高兴收到一项贡献,该贡献为 Debezium Server 添加了对 Pravega 的支持。Pravega 是一个云原生计算基金会(CNCF)的沙盒项目,拥有 Apache 2.0 许可证,它将自己描述为“用于连续生成和无界数据的存储抽象”。

Debezium Server Pravega sink 适配器提供两种模式:非事务模式和事务模式。非事务模式将 Debezium 批次中的每个事件单独写入 Pravega。事务模式将 Debezium 批次写入一个 Pravega 事务,并在批次完成后提交。

要了解更多关于如何将 Debezium 与 Pravega 结合使用的信息,请参阅 文档。非常感谢 Derek Moore 的这项精彩贡献!

Oracle 快照改进

Debezium Oracle 连接器在快照方面进行了两项改进:

  • 支持 `snapshot.include.collection.list` 选项(DBZ-3062);这允许仅为连接器捕获的部分表创建初始快照。

  • 新选项 `snapshot.locking.mode`,该选项控制连接器捕获表模式时的锁定行为(DBZ-3557);特别是,这允许完全禁用锁定,如果您可以保证在连接器进行(模式)快照期间没有 DDL 更改,这将非常有用。

此外,该连接器还包含多项错误修复,包括一些与 DDL 和 DML 解析相关的问题(DBZ-3545DBZ-3549DBZ-3554DBZ-3606)、RAC 安装的处理(DBZ-3563DBZ-3599)以及更高效的 LOB 列处理(DBZ-3556)。

其他改进和错误修复

Debezium SQL Server 连接器在性能方面进行了两项改进(3486DBZ-3515)。Postgres 连接器的变更事件模式现在包含基于源列定义的默认值(DBZ-2790)。例如,当从变更事件流中派生下游表模式时,这将非常有用。

其他修复包括:正确识别 MongoDB 副本集中的主成员(DBZ-3522)、MySQL 连接器 DDL 解析器支持 `JSON` 函数(DBZ-3559),以及将用于实现 outbox 模式的 Debezium Quarkus 扩展升级到 Quarkus 2.0(DBZ-3550)。

总而言之,Debezium 1.6.0.Beta2 中已解决 48 个问题。我们非常感谢所有为本次发布做出贡献的社区成员。

随着 Beta2 的发布,我们进入了 1.6 发布周期的稳定阶段。在最终发布之前,您可能还会看到一两个 CR(候选版本)。最终发布计划在本月底完成,除非出现任何意外的复杂情况。除了更多的错误修复和文档改进之外,我们还计划升级到 Apache Kafka 2.8,这将使您能够一窥使用 无 ZooKeeper 的 Kafka 来使用 Debezium!

同时,我们将着手制定 Debezium 1.7 的路线图(计划在 9 月底发布)。如果您对本次发布有特定的功能需求,请通过 邮件列表 与我们联系!

Gunnar Morling

Gunnar 是一位软件工程师,内心是一个开源爱好者,目前在 Confluent 担任技术专家。此前,他曾帮助构建一个基于 Apache Flink 的实时流处理平台,并领导了 Debezium 项目,这是一个用于变更数据捕获的分布式平台。他是 Java Champion,并创立了多个开源项目,如 JfrUnit、kcctl 和 MapStruct。Gunnar 是一位热情的博主 (morling.dev),并曾在 QCon、Java One 和 Devoxx 等各种会议上发表演讲。他居住在德国汉堡。

   


关于 Debezium

Debezium 是一个开源的分布式平台,可以将现有数据库转变为事件流,使应用程序能够几乎即时地看到并响应数据库中已提交的每个行级更改。Debezium 构建在 Kafka 之上,并提供了 Kafka Connect 兼容的连接器,用于监控特定的数据库管理系统。Debezium 将数据更改的历史记录在 Kafka 日志中,这样您的应用程序可以随时停止和重新启动,并可以轻松地消费在未运行时错过的所有事件,确保所有事件都被正确且完整地处理。Debezium 在 Apache 许可证 2.0 下是 开源 的。

参与进来

我们希望您觉得 Debezium 有趣且有用,并希望尝试一下。在 Twitter @debezium 上关注我们,在 Zulip 上与我们聊天,或加入我们的 邮件列表 与社区交流。所有代码都在 GitHub 上开源,因此请在本地构建代码,帮助我们改进现有连接器并添加更多连接器。如果您发现问题或有改进 Debezium 的想法,请告诉我们或 记录一个问题

版权所有 © Debezium 及其作者。保留所有权利。有关我们的商标详情,请访问我们的 商标政策商标列表。第三方商标属于其各自所有者,在此提及并不表示任何认可或关联。
×