请问爬取知乎时如何追踪答案的更新?

发布于 2022-09-05 22:21:32 字数 253 浏览 16 评论 0

  1. 想爬取知乎问题下的所有答案并维护,如果有新答案添加就更新数据库。但是个人动态里面是没有对于你关注问题下某个答案修改的通知的
    所以在经过一段时间后数据库里面一些答案与最新的答案就会有一些差别。
  2. 我想的是每天对已经采集的问题查询是否有新答案,这个比较好解决;然后就是如果有某个答案答主进行了修改,那么总不能用已经采集的和最新的答案进行比对吧。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

鸢与 2022-09-12 22:21:32

通过修改时间来改,也就是说,一开始就先判断 存储的 创建时间 和 修改时间 是不是与 新的创建时间和修改时间 相同,若相同,就不解析内容、存储,若不同,则对内容进行解析和存储。
图片描述

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文