从98年google以搜索技术起家开始，互联网至今，以提供内容为主的互联网企业每一家都离不开小爬虫的帮助，大到互联网巨头，小到刚成立没几天的创业公司， 在早期没有足够内容来撑住自家网站和app时，都会采取抓取手段来补充内容，让自家产品显得内容满满。
还有好些公司的商业模式就建立在爬虫技术之上的，比如搜索引擎公司、大数据处理公司、网络舆情监控公司，没有数据，他们的公司就没法运转。
另外现如今互联网公司的获客成本上升，出现了增长黑客这个概念，里面的大量运营技巧都是要依赖于爬虫技术的手段来驱动，这里不是指抓数据，而是模仿用户请求，模仿用户操作，自动发贴等手法来新增和激活用户。
接下来就来浅谈几家在这方面做得成功的公司
1.提到爬虫，必然会说起搜索引擎，它是直接利用爬虫抓取信息来构建底层服务的。
简单粗暴，但是直接有效，而如今世界上最大的两家搜索引擎服务公司(google和百度)，已分别是7千亿和600亿美金市值。
2.现在已是国民资讯app的今日头条，早期通过抓取数百家机构的新闻源，然后以技术手段来分发给用户，做到千人千面的阅读体验，现在已是中国互联网公司第三极。这也是一个在早期直接利用爬虫手段而成功的例子，如果不抓取别人的新闻资讯，今日头条根本不可能成功。
3.做职场社交，获得2亿美金投资的脉脉，早期直接抓取微博用户信息，用来弥补自身用户数量的不足，完成了脉脉早期几百万用户积累，不过脉脉抓取微博用户信息已被法院判决为非法，做社交媒体和舆情监控的估计没几家没抓过微博的数据吧。
相关阅读 >>
更多相关阅读请进入《爬虫技术》频道 >>
