给楼主补充一个，瑞雪采集云的开发平台。我用过这个企业级工具，非常好用。
用过python的爬虫框架scrapy，简单易学，非常好用，在此推荐给大家。使用scrapy的另一个好处是python里面有很多强大的文本挖掘、机器学习库，爬下资料的后续处理非常方便。
这也叫是干货？我看过
http://www.8kvv.com 上面干货很多特别全，
2016/05/10回复
爬虫工具？
试下这个，互联网工具推荐：
多用下载 http://www.duoyongxiazai.com
转载: http://www.woshipm.com/xiazai/216336.html
本文同步分享在 博客“lxw1844912514”（CSDN）。
如有侵权，请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一起分享。