python图片爬虫,指定关键字爬取Google图片+搜狗图片

目标

指定关键字,爬取若干张(>1000)图片。

环境

windows 10 + python3.7 + IDE为jupyter (or pycharm) +(可选:如需爬取谷歌图片,需科学上网)

Google实现

(需自行实现科学上网)

参考 : https://github.com/YoongiKim/AutoCrawler/blob/master/README.md

  1. 自行实现科学上网
  2. 安装Chrome浏览器--Chrome浏览器右上角的三个竖着的点--设置--关于Chrome(在左下角位置)--得到图1,它表明 Chrome版本为 87.0,记下这个版本号
  3. clone开源项目:git clone https://github.com/YoongiKim/AutoCrawler.git
  4. 在此项目的根目录下(即进到 requirements.txt文件所在的目录),执行 pip install -r requirements.txt
  5. 这里下载适合自己的chrom drive (选第二步中对应的版本号,即 87.0),如图2
  6. 在  keywords.txt  里写搜索的key words, 如想爬取猫的图,就写“cat”
  7. 执行python脚本,python run.py
  8. 文件将会被下载到 'download' 目录,会根据第6步中的key words自行形成次级目录.如图3
图1<
  • 6
    点赞
  • 17
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Clark Kent 2000

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值