此时一个对信息进行获取、存储、搜索、使用的系统就诞生了，我称其为个人结构化数据中心。

在 Python 中，多线程最常见的一个场景就是爬虫，例如这样一个需求，有多个结构一样的页面需要爬取，例如下方的URL（豆瓣阿凡达影评，以10个为例）

大家好，我是小菜。一个希望能够成为 吹着牛X谈架构 的男人！如果你也想成为我想成为的人，不然点个关注做个伴，让小菜不再孤单！

网络爬虫在许多领域都有广泛的应用，它的目标是从网站获取新的数据，并加以存储以方便访问。而网络爬虫工具越来越为人们所熟知，因为它能简化并自动化整个爬虫过程，使每个人都可以轻松访问网络数据资源。...

scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架,我们只需要实现少量的代码,就可以快速的抓取.

最近在学习scrapy框架,实在是有点难了,因为用起来的方法很不一样,很有Django的味道(就是我放弃了的Django),要在终端运行...隔了一天也忘得差不多了,现在来复习一下再继续听课....

上一篇写到了异步爬虫的操作，但是由于requests模块是同步模块会中止异步操作，所以这里要引入aiohttp。

最近一直在学习异步asyncio，但是一直学不会，可能是他太过于高深但我的水平还没到吧，看了还几天也没啥收获，爬虫也学了一些了，到我比较满意的程度，现在要开始学习前端知识了，但是不代表我会放弃python啦，两个都要学习，爬虫还要...

由于上一篇的排版被这个公众号的编辑器弄得和

爬虫的数据解析包括正则，bs4，xpath，现在学习到了bs4，但是还是有点糊涂，现在根据网上的一些资料深入学习一下。