文章来源于网络收集而来,版权归原创者所有,如有侵权请及时联系!
第12章 存入数据库
在之前的章节中,曾讨论过将爬取到的数据导出到文件的相关话题,但在某些时候,我们希望将爬取到的数据存储到数据库中,这一章来学习使用Item Pipeline实现Scrapy爬虫和几种常用数据库的接口。
以第8章toscrape_book项目作为环境展开本章内容的讲解。在toscrape_book项目中,我们爬取了网站http://books.toscrape.com中的书籍信息,其中每一本书的信息包括:
书名
价格
评价等级
产品编码
库存量
评价数量
下面我们来学习如何在爬取数据的过程中将书籍信息存储到各种数据库,这些数据库主要有:SQLite、MySQL、MongoDB、Redis。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论