学习 scrapy 爬虫框架

2020-05-09 15:27:45 浏览数 (1)

! 创建项目，

scrapy startproject xxx(项目名字)

2 创建爬虫

scrapy genspider 爬虫名字 网址域名

#scrapy genspider spider xicidaili.com

# 注意事项，爬虫名字和项目名字不要重复，

# 创建爬虫要定义爬取范围，也就是域名

scrapy crawl xicidaili 运行爬虫

爬虫 scrapy

0 人点赞