关于webmagic的线程停止

发布于 2021-11-29 13:35:27 字数 186 浏览 892 评论 2

@黄亿华 你好,想跟你请教个问题:webmagic这个爬虫工具最近在使用,工具很强大,大赞!现在我在使用的过程中有个问题,在爬取了一定的数据后,怎么停止?求解答,谢谢!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

明月松间行 2021-12-05 15:55:04

比如我在使用webmagic爬A网站和B网站,现在爬取A网站1000条数据后,停止A网站的爬虫程序,B网站的爬虫程序不受影响!谢谢

草莓味的萝莉 2021-12-03 09:11:16

说具体一点啊,比如日志,多长时间,是被限制了?

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文