webmagic 如何整合mongodb

Question

webmagic 如何整合mongodb?

使用的框架是 morphia + mvc

网上查询了 网上的一些题目 和 自己本地尝试，仍不成功。

望大神可以指点指点~

本人参考过 该帖子 

http://www.oschina.net/question/207854_118704

http://git.oschina.net/flashsword20/jobhunter/blob/master/src/main/java/us/codecraft/jobhunter/pipeline/JobInfoDaoPipeline.java

还是未能够将数据写入mongodb~

Answer 1

已经设置好了

Answer 2

肯定是你自己的问题，我从0.4.1版就开始使用mongodb了，我就是使用
Pipeline接口实现的，用在我自己的网站抓取，一直运行的很好。这是我的为网站域名，你可以看看。http://www.cdsoso.org

Answer 3

刚刚接触mongodb,想学习研究下，纯属个人兴趣~

Answer 4

什么场景下爬虫数据要用mongo 不用mysql存储

Answer 5

mongodb我也不是很熟悉，你可以先调试看看在Pipeline中有没有数据，再确定是WebMagic的问题，还是mongodb的客户端使用问题！