Spider 爬虫
引子
看看美女养养眼养眼吧，是不是经常苦于寻找不到这些资源？是不是经常因为网址的变更又找不到某些资源？
要想解决这个问题，简单嘛，就是把资源都保存到电脑上，但要是一口气保存两百多张，估计手都都抽筋。
这时候，就需要用到我们的爬虫了。
爬虫，即网络机器人，如果把互联网理解为一张巨大的蜘蛛网，那么爬虫就是在这张网上捕猎的蜘蛛，它会根据你给定的目标将资源保存下来，也就是持久化存储。
这个过程其实就类似于我们浏览器上网，只不过将这个繁琐的过程通过编写程序模拟的形式，让爬虫去互联网上抓取数据。
爬虫的价值
拉勾网爬虫工程师职位爬虫工程师的平均薪资为 ￥ 15510，刺激不，从就业的角度来说，爬虫工程师目前来说属于紧缺人才，深层次地掌握这门技术对于就业来说是非常有利的。
随着大数据时代的来临，爬虫技术的应用将越来广泛，抓取互联网上的数据为我所用，有了大量的数据，就如同有了一个数据银行一样，下一步就是如何将这些爬取的数据产品化、商业化。
总而言之，爬虫技术的应用将越来越广泛，在未来会拥有更好的发展空间。<