scrapy爬取cosplay图片并保存到本地指定文件夹

上传:zhukai_dong 浏览: 28 推荐: 0 文件:PDF 大小:750.43KB 上传时间:2020-12-31 19:21:09 版权申诉
其实关于scrapy的很多用法都没有使用过,需要多多巩固和学习 1.首先新建scrapy项目 scrapy startproject 项目名称 然后进入创建好的项目文件夹中创建爬虫 (这里我用的是CrawlSpider) scrapy genspider -t crawl 爬虫名称 域名 2.然后打开pycharm打开scrapy项目 记得要选正确项目包的路径要包含scrapy.cfg 要不然在后面会导致导入包错误以及无法运行爬虫 3.编写Item,确定你要爬取的目标 import scrapy class CosplayItem(scrapy.Item): """ 标题 co
上传资源
用户评论