解决python3 requests中urlretrieve 403forbidden

在用requests库中的urllib.request.urlretrieve(urlcode,folder_path+'test.jpg')去下载图片的是否会报出403 forbidden的访问禁止

res=requests.get(item)
    with open(folder_path+item[-10:],'wb') as f:
        f.write(res.content)

通过以上方法便可实现下载,其中item表示图片的链接,folder_path表示本地路径
以下为完成的用python3实现爬虫图片的代码

import  requests
from bs4 import  BeautifulSoup
import urllib.request

url='http://jandan.net/pic/page-7707'
header = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0'}

# header={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36'}
source_code=requests.get(url,headers=header)

plain_text=source_code.text

download_links=[]
Soup=BeautifulSoup(plain_text)
folder_path="/Users/chenmeiji/Desktop/a3/"
for pic_tag in Soup.find_all("img"):
    pic_link=pic_tag.get('src')
    download_links.append(pic_link)

for item in download_links:
    res=requests.get(item)
    with open(folder_path+item[-10:],'wb') as f:
        f.write(res.content)

实现以上爬虫代码可参考我的另一篇博客,零基础实现爬虫

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值