webmagic 使用RedisSchedule问题

发布于 2021-11-27 19:41:27 字数 417 浏览 433 评论 2

@黄亿华 您好,想跟您请教个问题:我在web应用中使用webmagic,当程序使用QueueScheduler()时什么问题都没有,一切都能正常跑;换成RedisScheduler()的时候,程序启动后 log日志显示:Spider http://xxxx.com started!  后就没信息了,程序没抓取到任何东西,我调试的时候发现RedisScheduler poll()拿到的url是null值, 而我RedisScheduler 这个的代码是在您 http://my.oschina.net/flashsword/blog/146890 这篇博文拿的,感谢您能在百忙之中抽空看下我的问题

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

情痴 2021-11-29 13:39:36

redis启动了,我在项目中也可以get/set, 至于配置我是在单机下的,配置文件没改动。我第一次用redis,不知道还需要配置什么?

瑾夏年华 2021-11-28 03:41:34

你是否启动了redis?配置是否正确?

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文