其中 scrapy startproject 是固定命令，stockstar 是工程名字。

今天这篇文章主要是分享两个技术点。第一：翻页数据如何处理；第二：构建一个db pipeline来获取数据并入库。

Scrapy数据解析主要有两个大类：xpath() 和 css() ，今天这篇文章主要讲解xpath如何解析我们想获取的页面数据。同时Scrapy还给我们提供自己的数据解析方法，即Selector（选择器），Selector是一个可独立使用的模块，我们可以用Sele...

Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。

在 scrapy_test 项目中的目录 spiders 中创建文件 quotes_spider.py

打开Chrome或者Edge(我用的Edge)，打开某趣阁的目录界面，然后F12审查元素，找到目录的超链接标签，右键复制Xpath

在开始爬取之前，必须创建一个新的Scrapy项目。进入您打算存储代码的目录中，运行下列命令:

为了提高效率，我们在平时工作中常会用到一些Python的效率工具，Python作为比较老的编程语言，它可以实现日常工作的各种自动化。为了更便利的开发项目，这里给大家推荐几个Python的效率工具。...

上一篇的枯燥无味，这一篇来还。写到插件篇了，终于能写点有意思的东西了，接下来就基本用法和插件篇来穿插着写一写。

写一写Spider中间件吧，都凌晨了，一点都不想写，主要是也没啥用...哦不，是平时用得少。因为工作上的事情，已经拖更好久了，这次就趁着半夜写一篇。...