java并发处理一个表中的大量数据,如何设置检查点,以便用于失败恢复,而不是重复处理处理过的数据?
java并发处理一个表中的大量数据,如何设置检查点,以便用于失败恢复,而不是重复处理处理过的数据?
比如在处理过程中,系统宕机,kill -9强制杀死之前,设置一个检查点,一遍下次从检查点开始恢复处理?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(1)
1,定期写入checkpoint,宕机不怕
2,数据处理要有幂等性,应对已经处理但没有写入checkpoint的数据
如果你用事务实时写入checkpoint,那就没上面的事了。