使用pyspider采集那些入库有顺序要求的页面该怎么写?
对于入库顺序有要求的数据在pyspider采集的时候该如何写?如采集手册或书籍章节内容,正常来说应该是第一章采集入库后在采集第二章,但是pyspider采集顺序是乱的,这种该如何解决?哪位大神给回答一下。谢谢。。。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(2)
这属于数据清洗吧, 第一章 应该有当前书籍的 章数 序列吧
目前就想到1个办法,一先入库,取返回值再写文本,二,先写到内存,最后统一入库