有同学私信我，说想学python的爬虫，我也挺无可奈何的，我建议先不着急，先把python的基础打好，爬虫只是把学过的基础糅合在一起而已，其实很想说，爬虫只是python的应用手段，并不是python的全部，不会分析，你爬过来的数据，没啥用，只不过做个样子。
从本篇开始，我们不再介绍python里面基础知识，开始做项目系列，第一期做爬虫的系列，建议有兴趣的同学，可以简单的前面的文章过一遍，做到心中对python有个大概的了解。
第一篇：
爬虫，在网上有很多解释，但是还是基于机器的常识来解释，太过抽象了，我这里举个例子：爬虫，其实就是一个“虫子”，带着两个触角，触角上就带着我们给予爬虫的信息，告诉它要去找什么资料，接下来，它就跟我们人一样，到处去各个网站溜达，不断的点点点，然后把信息背回家给我们，不知疲倦，除非断电。
这里，我大概说一下，在现网中，哪些地方经常用到的爬虫，这些爬虫够能干嘛，很容易就惊艳到你。
在现网中，爬虫也是有善恶之分，像谷歌，百度这些做搜索引擎的，一般情况下，隔一段时间就要对全网进行搜索一遍，把所有数据拿过来，大家伙才能看到数据，各个网站呢？面对这种爬虫，也是非常开心的，毕竟能增加自己的访问量嘛。
但是，恶意的爬虫，像抢票，一到节假日，就拼了老命对12306撸啊撸，恨不得把皮都给撸下来，这里替12306默哀3秒，你能成长起来，是真的不容易。
1、搜索公司，类似谷歌百度等搜索引擎公司，本质上就是一个巨大的爬虫公司，只不过很多网站都喜欢被他们爬而已。
2、舆情分析与数据挖掘，在这个领域，小编觉得这是爬虫数据用的经次于搜索的领域，像我们经常见到的微博，头条的各种排行版，这些都是分析得到的产物。
3、买数据的公司，或者数据聚合的公司，比如天眼查，企查查，西瓜数据等等。
4、黑产，灰产，刷量，排行榜，搬砖等，比如前期被判刑的美剧天堂还是什么公司就是这样的，这样的个人，团伙也是不少的。
5、新媒体爬虫
不知道有没有同学想起前段时间一个事，一家数据公司被起诉后导致关门，这家公司的日常就是用爬虫去爬各类厂家的数据，从而导致被起诉。
这里我们需要非常注意，就是robots协议，在爬虫的时候一定不要乱爬，因为有些网站他禁止你爬，你爬到了数据就会起诉你，后面的教程小编会详细讲这些。
上一篇：
--END--
作者：
原创作品，抄袭必究。
部分图片来源网络，如侵权请联系删除，谢谢！
如需要源码或资料，请私信我，谢谢。
,
