我很高兴地宣布 Debezium 1.3.0.Alpha1 发布!

1.3 发布线中的这个初始版本提供了一些有用的新功能:

  • Azure Event Hubs 的新 Debezium Server sink 适配器

  • SQL Server 连接器的新快照模式 initial_only

  • MongoDB 连接器的其他连接超时选项

总的来说,社区为这个版本修复了 不少于 31 个问题。让我们在本文的其余部分更详细地了解其中的一些。

Azure Event Hubs 接收适配器

Debezium 的 独立服务器 是 Debezium 生态系统中最新的功能之一。独立服务器提供了一个即用型应用程序,可以从源数据库流式传输变更事件到各种消息基础设施。

在社区的推动下,Debezium Server 现在支持 Azure Event Hubs(DBZ-2282)。现在,Debezium Server 可以将变更事件流式传输到 Amazon Kinesis、Apache Pulsar、Google Cloud Pub/Sub 和 Azure Event Hubs。

MongoDB 连接选项增强

Debezium MongoDB 连接器传统上使用驱动程序的默认连接选项和超时。在某些用例中,需要自定义这些默认值以支持您的部署中的延迟或性能问题。

现在为 MongoDB 提供了额外的配置选项:

mongodb.connect.timeout.ms
驱动程序在放弃连接尝试之前等待新连接的毫秒数。
默认值为 10000

mongodb.server.selection.timeout.ms
驱动程序选择服务器之前等待的毫秒数,超时后将抛出错误。
默认值为 30000

mongodb.socket.timeout.ms
驱动程序在套接字发送/接收操作超时之前的等待毫秒数。
值为 0 则禁用此行为。默认值为 0

其他功能

除了这些主要功能之外,1.3.0.Alpha1 版本还带来了一些其他新功能。

  • 新的 SQL Server 快照模式 initial_onlyDBZ-2379

  • 当任务遇到线程中断时,Postgres 和其他可能的数据库连接未正确关闭(DBZ-2133

Bug 修复

此外,还修复了许多 Bug,例如:

  • 忽略 Aurora 通过 SHOW TABLES 报告的非现有表(DBZ-1939

  • Cassandra 连接器未获取事件(DBZ-2086

  • PubSub Sink 发送空记录(DBZ-2277

  • 跳过 LSN 效率低下且不转发槽位位置(DBZ-2310

  • 包含可变位列的更改的消息大小至少大 68 倍(DBZ-2315

  • 连接器在处理具有 PK 更新的事务时重启,导致更改事件丢失(DBZ-2329

  • 处理与列表类型列相关的 commitLogs 时出错(DBZ-2345

  • 修复 Outbox Quarkus Extension 文档中的 dependency groupId(DBZ-2367

  • 无法检测 Azure SQL 版本(DBZ-2373

  • ParallelSnapshotReader 有时会抛出 NPE(DBZ-2387

请参阅 发行说明 以获取已解决问题的完整列表以及从早期 Debezium 版本升级的步骤。

非常感谢社区中所有为本次发布做出贡献的贡献者:Abhishek GuptaCory HarperArik CohenMoira TagleVictor XiangGrzegorz KołakowskiBjörn HäuserLukasz KorzeniowskiJonas Lins

Chris Cranford

Chris 是 IBM 的一名软件工程师,之前在 Red Hat 工作,他致力于 Debezium 项目,并每天都在深入研究 Oracle 和 Change Data Capture 的各个方面。他此前曾从事 Hibernate(领先的开源 JPA 持久化框架)方面的工作,并且继续为 Quarkus 做贡献。Chris 居住在美国北卡罗来纳州。

   


关于 Debezium

Debezium 是一个开源的分布式平台,可以将现有数据库转变为事件流,使应用程序能够几乎即时地看到并响应数据库中已提交的每个行级更改。Debezium 构建在 Kafka 之上,并提供了 Kafka Connect 兼容的连接器,用于监控特定的数据库管理系统。Debezium 将数据更改的历史记录在 Kafka 日志中,这样您的应用程序可以随时停止和重新启动,并可以轻松地消费在未运行时错过的所有事件,确保所有事件都被正确且完整地处理。Debezium 在 Apache 许可证 2.0 下是 开源 的。

参与进来

我们希望您觉得 Debezium 有趣且有用,并希望尝试一下。在 Twitter @debezium 上关注我们,在 Zulip 上与我们聊天,或加入我们的 邮件列表 与社区交流。所有代码都在 GitHub 上开源,因此请在本地构建代码,帮助我们改进现有连接器并添加更多连接器。如果您发现问题或有改进 Debezium 的想法,请告诉我们或 记录一个问题

版权所有 © Debezium 及其作者。保留所有权利。有关我们的商标详情,请访问我们的 商标政策商标列表。第三方商标属于其各自所有者,在此提及并不表示任何认可或关联。
×