百度图片的爬取(python)

一,构建框架 

1,导入项目所需要的库

# 导入需要的库
import os
import re
import requests

2,获取网站源码

# 获取网站源码
def get_html(url, header, params):
    response = requests.get(url, headers=header, params=params)
    # 源码的编码方式
    response.encoding = "utf_8"
    # 利用循环判断网页能否打开
    if response.status_code ==200:
        return response.text
    else:
        print("网址源码获取错误")

 3,解析提取图片的源址

# 解析提取图片的源地址
def parse_pic_url(html):
    result = re.findall('thumbURL": "(.*?)"', html, re.S)
    return result

4, 获取图片二进制源码

# 获取图片二进制源码
def get_pic_content(url):
    response = requests.get(url)
    return response.content

5,创建文件夹对图片保存

# 定义一个文件夹保存
def create_fold(fold_name):
    # 加异常处理
   
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值