webmagic如何处理指定网页的所有评论页
当获取的网页内容含有评论时,获取的第二页评论里,又有三个跳转页,这种怎么处理比较好,每跳转一次,链接地址就在当前地址上叠加了,要怎么才能固定成直接的页面地址?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
当获取的网页内容含有评论时,获取的第二页评论里,又有三个跳转页,这种怎么处理比较好,每跳转一次,链接地址就在当前地址上叠加了,要怎么才能固定成直接的页面地址?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(2)
昨天不可以,今天再试就可以翻页了。。。
直接在第一页就用 links() 获取完所有翻页的页面地址,后面的翻页后不再追加页面获取的连接可否解决?