pyspider单步调试通过,但是到Dashboard改了状态run不成功。
pyspider单步调试通过,爬取的结果能写入数据库。但是到Dashboard改了状态run不成功。
就直接finished。里面提示:
但是为什么单步调试又是没问题的呢?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
pyspider单步调试通过,爬取的结果能写入数据库。但是到Dashboard改了状态run不成功。
就直接finished。里面提示:
但是为什么单步调试又是没问题的呢?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(2)
看到 on_start 最后那个 +1 了吗,它产生了一条任务,但是可能是因为
已经抓过了,去重
已经处于活动状态(包括重试)
没有抓取
我是模拟通过输入关键词,选择时间检索论文,单步调试的时候模拟操作是通过js输入关键词,时间,是行的通的。run行不通。我改成直接用检索结果的url run,就可以继续爬取了。所以就是我使用js模拟操作存在问题,可是一边可以,一边又不行。为什么?