数据库重启导致 CDC 中间件无法继续接收CDC 消息该如何处理?

发布于 2022-09-13 00:20:58 字数 561 浏览 9 评论 0

公司项目用到了 Debezium,遇到一个问题:Debezium 提供了一个 EmbeddedEngine,这个 Engine 的工作流程可以大致简单描述未

run (){

  step1:Engine 内部会 启动一个线程 A,连接 mysql 数据库 读取 binlog 日志,
  并将读取到的数据放置到某一个队列中。
  
  step2:
  while(xxxx){
       //队列中读取数据
       data=queue.take();
       //交给项目的业务类处理
       listeners.forEach(data)
  }
  
}//end run 

问题:我们业务只定义了一个listener 接收处理从队列中读取到的数据。
重启了 mysql 服务器之后,线程 A 抛出了异常导致 无法继续从 mysql 服务器读取 binlog 日志。 然后这个时候 Engine 感知不到 线程A已经死掉了 ,就会一直阻塞在 take 处,我们业务listener也一直收不到data。这个问题有好的处理方式吗?
上面run方法的内部逻辑是我们使用了开源Debezium框架其内部封装好的.

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文