Question

PySpider是国人binux编写的强大的网络爬虫系统，并带有强大的WebUI。PySpider采用Python语言编写，分布式架构，支持多种数据库后端，包括强大的WebUI支持脚本编辑器、任务监视器、项目管理器以及结果查看器。PySpider源码见https://github.com/binux/pyspider ，已经有7000多star，是一个优秀的开源项目。在线示例位于http://demo.pyspider.org/ 。