摘要：使用 Scrapy 爬取豌豆荚全网 70,000+ App，并进行探索性分析。

最近发现知乎上感兴趣的问题越来越少，于是准备聚合下其他平台技术问答，比如 segmentfault、stackoverflow 等。

主要是记录一下自己写Python爬虫的经过与心得。同时也是为了分享一下如何能更高效率的学习写爬虫。IDE：Vscode Python版本: 3.6

为什么要学 scrapy 呢？看下图中的招聘要求，就清楚了。很多招聘要求都有 scrapy，主要是因为 scrapy 确实很强。那到底强在哪里呢？请在文中找答案。

摘要：在《6000 多款 App，看我如何搞定她们并将其洗白白~》中我们详细地分享了有关Scrapy框架抓取App数据的流程，并对抓回来的数据作了进一步的清洗。在本次分享中，接着对抓取回来的数据进行探索性分析，让你知道目前App市场...

如果说 GitHub 是程序员的天堂，那么 酷安 则是手机 App 爱好者们（别称「搞机」爱好者）的天堂，相比于那些传统的手机应用下载市场，酷安有三点特别之处：...

八月份的时候，由于脑洞大开，决定用 python 爬虫爬取了深圳的租房数据，并写了文章《用Python告诉你深圳房租有多高》，文章得到了一致好评和众多转载。由于我本身的朋友圈大多都在广州、深圳，因此，早就有挺多小伙伴叫我分析一...

爬虫框架也许能简化工作量，提高效率等。scrapy是一款方便好用，拓展方便的框架。

上周有某高校老师来我们公司进行培训，公司安排我上了两天课。最后一天是一个数据分析的小案例，这里记录分享一下，比较适合刚入门的小白练手。...

摘要： 如今移动互联网越来越发达，各式各样的 App 层出不穷，也就产生了优劣之分，相比于普通 App，我们肯定愿意去使用那些良心佳软，但去发现这些 App 并不太容易，本文使用 Scrapy 框架爬取了著名应用下载市场「酷安网」上的 60...