如何获取webmagic的爬取状态

Question

比如是否有爬取到数据，什么时候爬取完的，因为我看那个process方法都没有返回值。求各位大神指教

Answer 1

通过jmx查看，参考官方说明：http://webmagic.io/docs/zh/posts/ch4-basic-page-processor/monitor.html

Answer 2

直接看爬虫框架有时会很吃力，建议从简单的程序一步步入手。