Python爬虫系列:安装Scrapy框架的那些事

2021-02-12 13:51:26 浏览数 (1)

对每个人而言,真正的职责只有一个:找到自我…………所有其他的路都是不完整的,是人的逃避方式,是对大众理想的懦弱回归,是随波逐流,是内心的恐惧。

-《德米安 彷徨少年时》

最近小编在学Python爬虫时遇到安装Scrapy框架时出错,具体原因是安装某个模块时报错。

报错复现:

在Pycharm的终端中输入pip install scrapy下载时出现的报错如上图。

查看错误时发现在安装Twisted模块时出现了问题,在百度各种搜索之后以及尝试后,发现更换国内镜像源并不好使,主要还是没解决。

最后小编是在下面的网站中直接下载的模块安装包

代码语言:javascript复制
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

然后在网站中直接Ctrl F查找找到Twisted这个模块,切记cp后面是根据你安装的Python版本下载的,比如Python3.8版本显示的就是38.

至于如何查看Python版本,打开cmd,输入Python即可:

在安装该模块之前,还需要将你的pip更新到最新的版本:更新命令如下:

代码语言:javascript复制
pip:python -m pip install -U pip

将安装文件下载完成后,在cmd中输入:pip install 文件路径 文件名称,如下:

显示安装安装完成后,即可在cmd窗口中输入pip install scrapy

若最后还有报错,可尝试更换镜像源,小编是之后一次直接安装成功了。

在安装时添加镜像源的命令

代码语言:javascript复制
pip inatll scrapy -i  镜像源网站

相关镜像源的网址:

Python爬虫系列,未完待续...

0 人点赞