发布时间：2016-11-24 11:43:34

。github上有好几个这样的开源项目，但是都只提供了爬虫部分，这个项目在爬虫的基础上还增加了保存数据，建立elasticsearch索引的模块，可以用在实际生产环境中，不过web模块还是需要自己开发安装node.js和pm2，node用来运行爬虫程序和索引程序，pm2用来管理node任务推荐使用cnpm命令安装npm依赖，最简单的安装方式$ .........【阅读全文】