- 博客(2)
- 收藏
- 关注
RSS订阅原创 用Scrapy抓取英雄联盟所有皮肤
部署scrapy在命令行中输入：scrapy startproject lolskinSpidercd lolskinSpiderscrapy gensipder lolskin lol.qq.com然后进入文件夹开始构造任务设置scrapy首先要分析爬取的网站，观察英雄联盟官网 英雄联盟游戏资料，利用scrapy shellscrapy shell "https://lol.qq.com/data/info-heros.shtml"hero=response.xpath('//*[
2020-08-14 14:14:32
429
原创 使用Scrapy爬取图片
使用Scrapy爬取图片分析网址配置Scrapy配置items.py设置pipelines.py设置settings.py运行scrapy分析网址网址地址：美食杰-川菜.我们需要爬取网站上的菜谱图片，分析网址结构如下：#在命令行中运行scrapy shell "https://www.meishij.net/china-food/caixi/chuancai/"#可以发现我们想要爬取的图片src地址位于：picture_src = response.xpath('/html/body/div[
2020-08-13 14:37:09
397
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人