webmagic怎么执行翻页
我在爬取韩国某电商网时,准备进行翻页获取下一页商品的全部url地址。但是下一页按钮为JavaScript:void(0)我不知道该如何点击。求助各位大佬
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
我在爬取韩国某电商网时,准备进行翻页获取下一页商品的全部url地址。但是下一页按钮为JavaScript:void(0)我不知道该如何点击。求助各位大佬
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(6)
这种网上很多,你可以查阅借鉴下
回复
会不会看请求?F12 查看请求的post端口 上面应该有page=N 类似的
回复
网站多少,我看看:hushed:
回复
请问一下,这个问题解决了?是怎么做翻页的
回复
用selenium,不然是没办法处理的
1、先抓取页面有多少页
2、之后拼接到url 作为种子遍历抓取就得了