python爬虫的爬取图片代码

最新推荐文章于 2024-08-17 17:18:53 发布
最新推荐文章于 2024-08-17 17:18:53 发布
阅读量2.3k 收藏 19
点赞数 8
文章标签： python 爬虫 c#
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_75102220/article/details/133631558
版权

打开pycharm 

1.全部代码：

import re
import os
import requests


# 获取网站源代码
def get_html(url, headers, params):
    response = requests.get(url, headers=headers, params=params)
    response.encoding = "utf-8"
    if response.status_code == 200:
        return response.text

    else:
        print("网站源码获取错误")


def parse_pic_url(html):
    result = re.findall('thumbURL":"(.*?)"', html, re.S)
    return result


def get_pic_content(url):
    response = requests.get(url)
    return response.content


def save_pic(fold_name,content, pic_name):
    with open(fold_name+"/" + str(pic_name) + ".jpg", "wb") as f:
        f.write(content)
        f.close()


# 定义一个文件夹
def create_fold(fold_name):
    try:
        os.mkdir(fold_name)
    except:
        print("文件已存在")


def main():
    # 输入文件夹名字
    fold_name = input("请输入您要抓取图片的名字")
    # 调用函数，创建文件夹
    create_fold(fold_name)
    # 输入要抓取的图片页数
    page_name = input("请输入要抓取的页数  （0，1，2，3，4......）")
    pic_name = 0
    for i in range(10):
        url = "https://image.baidu.com/search/acjson?tn=resultjson_com&logid=11836243366050550448&ipn=rj&ct=201326592&is=&fp=result&fr=ala&word=%E5%A4%A7%E7%86%8A%E7%8C%AB&queryWord=%E5%A4%A7%E7%86%8A%E7%8C%AB&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&s=&se=&tab=&width=&height=&face=&istype=&qc=&nc=&expermode=&nojc=&isAsync=&pn=60&rn=30&gsm=3c&1695869692997="
        headers = \
            {"Accept": "text/plain, */*; q=0.01",
             "Accept-Encoding": "gzip, deflate",
             "Accept-Language": "zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6",
             "Connection": "keep-alive",
             "Cookie": "winWH=%5E6_1659x838; BDIMGISLOGIN=0; BDqhfp=%E5%A4%A7%E7%86%8A%E7%8C%AB%26%26-10-1undefined%26%268568%26%267; BIDUPSID=84AA588D485BC5D9748C16152F786E4A; PSTM=1664863489; BDUSS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BDUSS_BFESS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BAIDUID=AA120298DBC668808E941F202EDAFE7D:FG=1; BAIDUID_BFESS=AA120298DBC668808E941F202EDAFE7D:FG=1; ZFY=ZkM1wYgsnkzHUCE:B8RSn0l9c2wZElo2ztkkXles7ZEQ:C; BDRCVFR[dG2JNJb_ajR]=mk3SLVN4HKm; BDRCVFR[-pGxjrCMryR]=mk3SLVN4HKm; cleanHistoryStatus=0; BDRCVFR[Tp5-T0kH1pb]=mk3SLVN4HKm; BDRCVFR[tox4WRQ4-Km]=mk3SLVN4HKm; indexPageSugList=%5B%22%E5%A4%A7%E7%86%8A%E7%8C%AB%22%2C%22%E7%9C%BC%E9%95%9C%E6%A1%86%E7%A2%8E%22%5D; userFrom=null; ab_sr=1.0.1_ZjU4YWMxNDUwYzdmOTA5MzNlOTcwMzU1Y2Q2Yzg5N2EyNDAxYTJmY2E1NGU4MTFjZDYzMDllMmQ1ZTcyYzE2NmJhNTNmY2I3YzAyOWNkZDEzYzhiMmRlMWUxMWEzMTdiNGNkZTEzNTk3N2JiOGY2NjUxZTYyZGYwMTYwNTkzZWI3YWU1MmVmMThhNWU5ZWMwYThkYmIyY2UxNWFhM2RiZg==",
             "Host": "image.baidu.com",
             "Referer": "https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%B4%F3%D0%DC%C3%A8&fr=ala&ala=1&alatpl=normal&pos=0&dyTabStr=MTEsMCwxLDYsMyw1LDQsMiw4LDcsOQ%3D%3D",
             "Sec-Ch-Ua": '"Microsoft Edge";v="117", "Not;A=Brand";v="8", "Chromium";v="117"',
             "Sec-Ch-Ua-Mobile": "?0",
             "Sec-Ch-Ua-Platform": '"Windows"',
             "Sec-Fetch-Dest": "empty",
             "Sec-Fetch-Mode": "cors",
             "Sec-Fetch-Site": "same-origin",
             "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/117.0.0.0 Safari/537.36 Edg/117.0.2045.43",
             "X-Requested-With": "XMLHttpRequest", }
        params = {"tn": "resultjson_com",
                  "logid": "11836243366050550448",
                  "ipn": "rj",
                  "ct": "201326592",
                  "fp": "result",
                  "fr": "ala",
                  "word": fold_name,
                  "queryWord": fold_name,
                  "cl": "2",
                  "lm": "-1",
                  "ie": "utf-8",
                  "oe": "utf-8",
                  "pn": str(int(i + 1) * 30),
                  "rn": "30",
                  "gsm": "3c"
                  }
        html = get_html(url, headers, params)
        result = parse_pic_url(html)
        for item in result:
            pic_content = get_pic_content(item)
            save_pic(fold_name,pic_content, pic_name)
            pic_name += 1
            print("正在保存第" + str(pic_name) + "张图片")


if __name__ == "__main__":
    main()

2. 详细介绍：

1.基础导包 

import re

import os

import requests 

导如运行环境所需的包 

 2.基础函数代码：
# 获取网站源代码
def get_html(url, headers, params):
    response = requests.get(url, headers=headers, params=params)
    response.encoding = "utf-8"
    if response.status_code == 200:
        return response.text

    else:
        print("网站源码获取错误")


def parse_pic_url(html):
    result = re.findall('thumbURL":"(.*?)"', html, re.S)
    return result


def get_pic_content(url):
    response = requests.get(url)
    return response.content


def save_pic(fold_name,content, pic_name):
    with open(fold_name+"/" + str(pic_name) + ".jpg", "wb") as f:
        f.write(content)
        f.close()


# 定义一个文件夹
def create_fold(fold_name):
    try:
        os.mkdir(fold_name)
    except:
        print("文件已存在")
3.具体实现的步骤 
def main():
    # 输入文件夹名字
    fold_name = input("请输入您要抓取图片的名字")
    # 调用函数，创建文件夹
    create_fold(fold_name)
    # 输入要抓取的图片页数
    page_name = input("请输入要抓取的页数  （0，1，2，3，4......）")
    pic_name = 0
    for i in range(10):
        url = "https://image.baidu.com/search/acjson?tn=resultjson_com&logid=11836243366050550448&ipn=rj&ct=201326592&is=&fp=result&fr=ala&word=%E5%A4%A7%E7%86%8A%E7%8C%AB&queryWord=%E5%A4%A7%E7%86%8A%E7%8C%AB&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&s=&se=&tab=&width=&height=&face=&istype=&qc=&nc=&expermode=&nojc=&isAsync=&pn=60&rn=30&gsm=3c&1695869692997="
        headers = \
            {"Accept": "text/plain, */*; q=0.01",
             "Accept-Encoding": "gzip, deflate",
             "Accept-Language": "zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6",
             "Connection": "keep-alive",
             "Cookie": "winWH=%5E6_1659x838; BDIMGISLOGIN=0; BDqhfp=%E5%A4%A7%E7%86%8A%E7%8C%AB%26%26-10-1undefined%26%268568%26%267; BIDUPSID=84AA588D485BC5D9748C16152F786E4A; PSTM=1664863489; BDUSS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BDUSS_BFESS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BAIDUID=AA120298DBC668808E941F202EDAFE7D:FG=1; BAIDUID_BFESS=AA120298DBC668808E941F202EDAFE7D:FG=1; ZFY=ZkM1wYgsnkzHUCE:B8RSn0l9c2wZElo2ztkkXles7ZEQ:C; BDRCVFR[dG2JNJb_ajR]=mk3SLVN4HKm; BDRCVFR[-pGxjrCMryR]=mk3SLVN4HKm; cleanHistoryStatus=0; BDRCVFR[Tp5-T0kH1pb]=mk3SLVN4HKm; BDRCVFR[tox4WRQ4-Km]=mk3SLVN4HKm; indexPageSugList=%5B%22%E5%A4%A7%E7%86%8A%E7%8C%AB%22%2C%22%E7%9C%BC%E9%95%9C%E6%A1%86%E7%A2%8E%22%5D; userFrom=null; ab_sr=1.0.1_ZjU4YWMxNDUwYzdmOTA5MzNlOTcwMzU1Y2Q2Yzg5N2EyNDAxYTJmY2E1NGU4MTFjZDYzMDllMmQ1ZTcyYzE2NmJhNTNmY2I3YzAyOWNkZDEzYzhiMmRlMWUxMWEzMTdiNGNkZTEzNTk3N2JiOGY2NjUxZTYyZGYwMTYwNTkzZWI3YWU1MmVmMThhNWU5ZWMwYThkYmIyY2UxNWFhM2RiZg==",
             "Host": "image.baidu.com",
             "Referer": "https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%B4%F3%D0%DC%C3%A8&fr=ala&ala=1&alatpl=normal&pos=0&dyTabStr=MTEsMCwxLDYsMyw1LDQsMiw4LDcsOQ%3D%3D",
             "Sec-Ch-Ua": '"Microsoft Edge";v="117", "Not;A=Brand";v="8", "Chromium";v="117"',
             "Sec-Ch-Ua-Mobile": "?0",
             "Sec-Ch-Ua-Platform": '"Windows"',
             "Sec-Fetch-Dest": "empty",
             "Sec-Fetch-Mode": "cors",
             "Sec-Fetch-Site": "same-origin",
             "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/117.0.0.0 Safari/537.36 Edg/117.0.2045.43",
             "X-Requested-With": "XMLHttpRequest", }
        params = {"tn": "resultjson_com",
                  "logid": "11836243366050550448",
                  "ipn": "rj",
                  "ct": "201326592",
                  "fp": "result",
                  "fr": "ala",
                  "word": fold_name,
                  "queryWord": fold_name,
                  "cl": "2",
                  "lm": "-1",
                  "ie": "utf-8",
                  "oe": "utf-8",
                  "pn": str(int(i + 1) * 30),
                  "rn": "30",
                  "gsm": "3c"
                  }
        html = get_html(url, headers, params)
        result = parse_pic_url(html)
        for item in result:
            pic_content = get_pic_content(item)
            save_pic(fold_name,pic_content, pic_name)
            pic_name += 1
            print("正在保存第" + str(pic_name) + "张图片")

注：

其中的url是爬取的具体网址 

url = "https://image.baidu.com/search/acjson?tn=resultjson_com&logid=11836243366050550448&ipn=rj&ct=201326592&is=&fp=result&fr=ala&word=%E5%A4%A7%E7%86%8A%E7%8C%AB&queryWord=%E5%A4%A7%E7%86%8A%E7%8C%AB&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&s=&se=&tab=&width=&height=&face=&istype=&qc=&nc=&expermode=&nojc=&isAsync=&pn=60&rn=30&gsm=3c&1695869692997="

 

headers = \
    {"Accept": "text/plain, */*; q=0.01",
     "Accept-Encoding": "gzip, deflate",
     "Accept-Language": "zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6",
     "Connection": "keep-alive",
     "Cookie": "winWH=%5E6_1659x838; BDIMGISLOGIN=0; BDqhfp=%E5%A4%A7%E7%86%8A%E7%8C%AB%26%26-10-1undefined%26%268568%26%267; BIDUPSID=84AA588D485BC5D9748C16152F786E4A; PSTM=1664863489; BDUSS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BDUSS_BFESS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BAIDUID=AA120298DBC668808E941F202EDAFE7D:FG=1; BAIDUID_BFESS=AA120298DBC668808E941F202EDAFE7D:FG=1; ZFY=ZkM1wYgsnkzHUCE:B8RSn0l9c2wZElo2ztkkXles7ZEQ:C; BDRCVFR[dG2JNJb_ajR]=mk3SLVN4HKm; BDRCVFR[-pGxjrCMryR]=mk3SLVN4HKm; cleanHistoryStatus=0; BDRCVFR[Tp5-T0kH1pb]=mk3SLVN4HKm; BDRCVFR[tox4WRQ4-Km]=mk3SLVN4HKm; indexPageSugList=%5B%22%E5%A4%A7%E7%86%8A%E7%8C%AB%22%2C%22%E7%9C%BC%E9%95%9C%E6%A1%86%E7%A2%8E%22%5D; userFrom=null; ab_sr=1.0.1_ZjU4YWMxNDUwYzdmOTA5MzNlOTcwMzU1Y2Q2Yzg5N2EyNDAxYTJmY2E1NGU4MTFjZDYzMDllMmQ1ZTcyYzE2NmJhNTNmY2I3YzAyOWNkZDEzYzhiMmRlMWUxMWEzMTdiNGNkZTEzNTk3N2JiOGY2NjUxZTYyZGYwMTYwNTkzZWI3YWU1MmVmMThhNWU5ZWMwYThkYmIyY2UxNWFhM2RiZg==",
     "Host": "image.baidu.com",
     "Referer": "https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%B4%F3%D0%DC%C3%A8&fr=ala&ala=1&alatpl=normal&pos=0&dyTabStr=MTEsMCwxLDYsMyw1LDQsMiw4LDcsOQ%3D%3D",
     "Sec-Ch-Ua": '"Microsoft Edge";v="117", "Not;A=Brand";v="8", "Chromium";v="117"',
     "Sec-Ch-Ua-Mobile": "?0",
     "Sec-Ch-Ua-Platform": '"Windows"',
     "Sec-Fetch-Dest": "empty",
     "Sec-Fetch-Mode": "cors",
     "Sec-Fetch-Site": "same-origin",
     "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/117.0.0.0 Safari/537.36 Edg/117.0.2045.43",
     "X-Requested-With": "XMLHttpRequest", }

 

 

params = {"tn": "resultjson_com",
          "logid": "11836243366050550448",
          "ipn": "rj",
          "ct": "201326592",
          "fp": "result",
          "fr": "ala",
          "word": fold_name,
          "queryWord": fold_name,
          "cl": "2",
          "lm": "-1",
          "ie": "utf-8",
          "oe": "utf-8",
          "pn": str(int(i + 1) * 30),
          "rn": "30",
          "gsm": "3c"
          }

注：这三个需要是一个网页中获取到的不能够跨网页 

3.具体实现步骤详细介绍 （百度大熊猫图片）

1. 打开百度搜索大熊猫

 

2.点击大熊猫百度图片

进入 

 

3.随后点击f12或者点击鼠标右键进入检查模式 

 

4.点击网络

 

5.再点击网页右上角刷新 

 

6.随后点击gif文件的图片

 

7.点击后 点击标头

 

8.复制 请求url 

注：一定要状态代码为：200 ok

 

复制代码到url中 如：

 

9. 随后复制 请求标头

 

复制之后输入到headers中 如： 

 

注： 每一个变量需要输入在双引号中，有双引号则用单引号

10. 随后 点击负载

复制负载的内容

 

复制负载的内容到params中

 

 注： 同样每一个变量需要输入在双引号中，有双引号则用单引号

4.完整代码展示 

import re
import os
import requests


# 获取网站源代码
def get_html(url, headers, params):
    response = requests.get(url, headers=headers, params=params)
    response.encoding = "utf-8"
    if response.status_code == 200:
        return response.text

    else:
        print("网站源码获取错误")


def parse_pic_url(html):
    result = re.findall('thumbURL":"(.*?)"', html, re.S)
    return result


def get_pic_content(url):
    response = requests.get(url)
    return response.content


def save_pic(fold_name,content, pic_name):
    with open(fold_name+"/" + str(pic_name) + ".jpg", "wb") as f:
        f.write(content)
        f.close()


# 定义一个文件夹
def create_fold(fold_name):
    try:
        os.mkdir(fold_name)
    except:
        print("文件已存在")


def main():
    try:
        # 输入文件夹名字
        fold_name = input("请输入您要抓取图片的名字")
        # 调用函数，创建文件夹
        create_fold(fold_name)
        # 输入要抓取的图片页数
        page_name = input("请输入要抓取的页数  （0，1，2，3，4......）")
        pic_name = 0
        for i in range(10):
            try:
                url = "https://image.baidu.com/search/acjson?tn=resultjson_com&logid=11836243366050550448&ipn=rj&ct=201326592&is=&fp=result&fr=ala&word=%E5%A4%A7%E7%86%8A%E7%8C%AB&queryWord=%E5%A4%A7%E7%86%8A%E7%8C%AB&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&s=&se=&tab=&width=&height=&face=&istype=&qc=&nc=&expermode=&nojc=&isAsync=&pn=60&rn=30&gsm=3c&1695869692997="
                headers = \
                    {"Accept": "text/plain, */*; q=0.01",
                     "Accept-Encoding": "gzip, deflate",
                     "Accept-Language": "zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6",
                     "Connection": "keep-alive",
                     "Cookie": "winWH=%5E6_1659x838; BDIMGISLOGIN=0; BDqhfp=%E5%A4%A7%E7%86%8A%E7%8C%AB%26%26-10-1undefined%26%268568%26%267; BIDUPSID=84AA588D485BC5D9748C16152F786E4A; PSTM=1664863489; BDUSS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BDUSS_BFESS=9UelhFRmVxQ2FYRURpM2hnanRSb09DcE5BcDFIYmdhM25DSXd3bWFMLX5mbWhqRVFBQUFBJCQAAAAAAAAAAAEAAABc%7EUGiAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAL%7ExQGO%7E8UBjc2; BAIDUID=AA120298DBC668808E941F202EDAFE7D:FG=1; BAIDUID_BFESS=AA120298DBC668808E941F202EDAFE7D:FG=1; ZFY=ZkM1wYgsnkzHUCE:B8RSn0l9c2wZElo2ztkkXles7ZEQ:C; BDRCVFR[dG2JNJb_ajR]=mk3SLVN4HKm; BDRCVFR[-pGxjrCMryR]=mk3SLVN4HKm; cleanHistoryStatus=0; BDRCVFR[Tp5-T0kH1pb]=mk3SLVN4HKm; BDRCVFR[tox4WRQ4-Km]=mk3SLVN4HKm; indexPageSugList=%5B%22%E5%A4%A7%E7%86%8A%E7%8C%AB%22%2C%22%E7%9C%BC%E9%95%9C%E6%A1%86%E7%A2%8E%22%5D; userFrom=null; ab_sr=1.0.1_ZjU4YWMxNDUwYzdmOTA5MzNlOTcwMzU1Y2Q2Yzg5N2EyNDAxYTJmY2E1NGU4MTFjZDYzMDllMmQ1ZTcyYzE2NmJhNTNmY2I3YzAyOWNkZDEzYzhiMmRlMWUxMWEzMTdiNGNkZTEzNTk3N2JiOGY2NjUxZTYyZGYwMTYwNTkzZWI3YWU1MmVmMThhNWU5ZWMwYThkYmIyY2UxNWFhM2RiZg==",
                     "Host": "image.baidu.com",
                     "Referer": "https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%B4%F3%D0%DC%C3%A8&fr=ala&ala=1&alatpl=normal&pos=0&dyTabStr=MTEsMCwxLDYsMyw1LDQsMiw4LDcsOQ%3D%3D",
                     "Sec-Ch-Ua": '"Microsoft Edge";v="117", "Not;A=Brand";v="8", "Chromium";v="117"',
                     "Sec-Ch-Ua-Mobile": "?0",
                     "Sec-Ch-Ua-Platform": '"Windows"',
                     "Sec-Fetch-Dest": "empty",
                     "Sec-Fetch-Mode": "cors",
                     "Sec-Fetch-Site": "same-origin",
                     "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/117.0.0.0 Safari/537.36 Edg/117.0.2045.43",
                     "X-Requested-With": "XMLHttpRequest", }
                params = {"tn": "resultjson_com",
                          "logid": "11836243366050550448",
                          "ipn": "rj",
                          "ct": "201326592",
                          "fp": "result",
                          "fr": "ala",
                          "word": fold_name,
                          "queryWord": fold_name,
                          "cl": "2",
                          "lm": "-1",
                          "ie": "utf-8",
                          "oe": "utf-8",
                          "pn": str(int(i + 1) * 30),
                          "rn": "30",
                          "gsm": "3c"
                          }
                html = get_html(url, headers, params)
                result = parse_pic_url(html)
                for item in result:
                    pic_content = get_pic_content(item)
                    save_pic(fold_name,pic_content, pic_name)
                    pic_name += 1
                    print("正在保存第" + str(pic_name) + "张图片")
            except:
                print("抓取第"+str()+"页错误")
    except:
        print("图片抓取异常.....")


if __name__ == "__main__":
    main()

 

随后点击运行即可爬取图片：

 

5.结束语 

 谢谢！大家的观看

祝大家学习愉快！

✘千辰
关注
python爬网站图片教程_python爬虫爬取图片的简单代码
weixin_42309311的博客
01-29 1900
Python是很好的爬虫工具不用再说了，它可以满足我们爬取网络内容的需求，那最简单的爬取网络上的图片，可以通过很简单的方法实现。只需导入正则表达式模块，并利用spider原理通过使用定义函数的方法可以轻松的实现爬取图片的需求。1、spider原理spider就是定义爬取的动作及分析网站的地方。以初始的URL**初始化Request**，并设置回调函数。 当该request**下载完毕并返回时，将生...
python爬虫 爬取超清壁纸代码实例
01-01
简介 壁纸的选择其实很大程度上能看出电脑主人的内心世界，有的人喜欢风景，有的人喜欢星空，...演示图片 完整源代码 ''' 在学习过程中有什么不懂得可以加我的 python学习交流扣扣qun，934109170 群里有不错的学习
Python批量爬取某图片网站图片完整代码
10-09
Python批量爬取某图片网站图片完整代码，python downimage.py 即可执行
Python爬虫实战：图片爬取与保存
2301_82000445的博客
03-12 5957
👉Python学习路线汇总👈Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。（学习教程文末领取哈）👉Python必备开发工具👈。
Python爬虫图片：从入门到精通
最新发布
小相探索IT世界
08-17 2476
爬虫（Web Crawler 或 Spider）是一种自动浏览网络的程序，它按照一定的算法顺序访问网页，抓取网页上的信息。图片爬虫是网络爬虫的一种特殊形式，专注于从互联网上抓取图片资源。与文本数据爬虫相比，图片爬虫在技术上有一些独特的考量和挑战。图片爬虫是一种自动下载网页中图片的程序，它可以识别图片链接并将其保存到本地或云存储中。是一个用于解析HTML和XML文档的库，它能够从复杂的HTML文档中提取数据。
爬虫爬取图片代码
mofeigege的博客
11-07 2519
此文仅做记录，方便自己观看 import requests from bs4 import BeautifulSoup url = "https://www.agefans.tv/update" r = requests.get(url) print(r.status_code) r.encoding = r.apparent_encoding text = r.text soup = Beau...
用python爬虫爬图片代码_用python爬虫爬取壁纸图片（入门级代码）
weixin_39916479的博客
12-07 1596
我刚接触python爬虫，正想要一个练手项目，所以选择从爬取静态页面开始，开启我的爬虫之旅本次要爬取的网站是：先上代码:import requestsfrom bs4 import BeautifulSoupimport osimport re​​def getHtmlurl(url):try:r = requests.get(url)r.raise_for_status()# 有效的判断网络连接...
python爬虫爬取图片代码_Python使用爬虫抓取美女图片的代码详解
weixin_39900206的博客
11-24 548
Python使用爬虫抓取美女图片并保存到本地的方法【测试可用】本文实例讲述了Python使用爬虫抓取美女图片并保存到本地的方法。分享给大家供大家参考，具体如下：图片资源来自于www.qiubaichengren.com代码基于Python 3.5.2友情提醒：血气方刚的骚年。请谨慎阅图！谨慎阅图！！谨慎阅图！！！code：#!/usr/bin/env python# -*- coding: utf...
Python爬虫：使用简单代码实现图片爬取
weixin_42011794的博客
12-03 2138
使用一段简单代码爬取图片： import requests #导入requests response = requests.get('https://m.baidu.com/static/index/plus/plus_logo.png') #通过待爬取图片的url获取到响应内容 with open('E:/yellow/picture/1.png','wb') as f: #使用ope...
python网络爬虫爬取图片代码
juewang_love的博客
09-27 3956
因为刚学的python，有些地方的代码还需要改进。后续有时间会继续改进代码。 此文章是基于Python 3.6.0a4 进行的开发，目的是爬取网站的图片，打包成一个文件夹 本来的目的是想基于主页进行遍历所有的图集，进去之后再遍历所有的图片进行下载，结果发现url地址根本就不需要我遍历，直接用数字进行累加就可以，晕倒。
python爬虫爬取图片代码
05-29
以下是一个简单的 Python 爬虫爬取图片的示例代码： ```python import requests import os url = 'https://www.example.com/image.jpg' # 图片 URL path = './images' # 存储路径 if not os.path.exists(path): ...
网站图片爬取代码
09-16
网络图片爬取代码，亲测可用，，，刚学习Python的盆友不要错过哦
python爬虫爬取网上图片
06-09
Python爬虫技术是一种用于自动化网络数据抓取的编程方法，尤其在处理大量网页信息时非常有用。本项目是一个关于使用Python进行图片爬取的小型实践，旨在帮助学习者掌握基本的网页抓取和图片下载技能。 首先，我们...
Python爬虫爬取一个网页上的图片地址实例代码
09-20
总结一下，Python爬虫爬取网页图片地址的关键步骤包括： 1. 使用`urllib.request`获取网页HTML源代码。 2. 使用`re`模块通过正则表达式匹配图片URL。 3. 提取并存储找到的图片URL。 4. 可以进一步处理这些URL，如...
Python爬虫抓取指定网页图片代码实例
菜鸟教程
11-16 3551
更多编程教程请到：菜鸟教程 https://www.piaodoo.com/ 友情链接：好看站 http://www.nrso.net/ 高州阳光论坛https://www.hnthzk.com/ 想要爬取指定网页中的图片主要需要以下三个步骤： （1）指定网站链接，抓取该网站的源代码（如果使用google浏览器就是按下鼠标右键 -> Inspect-> Elements 中的 html 内容） （2）根据你要抓取的内容设置正则表达式以匹配要抓取的内容 （3）设置循环列表，重复抓取和保
python爬虫爬取图片代码_Python 爬虫案例爬取图片源代码奉上
weixin_39822493的博客
11-21 741
"""#导入第三方的一个http的请求库导入方法pip install requests#import requests导入Python的标准库 其自带import re思路定义一个函数，目的获取每张图片的地址1.先找到目标网址2、用正则来匹配不同图片的地址，产生匹配结果3、通过源代码与匹配之后的结果来找到图片的地址"""importrequestsdefget_urls():#第一步(加入目标网...
python爬虫图片实例-Python爬虫爬取煎蛋网图片代码实例
weixin_37988176的博客
10-30 177
这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天，试着爬取了煎蛋网的图片。用到的包：urllib.requestos分别使用几个函数，来控制下载的图片的页数，获取图片的网页，获取网页页数以及保存图片到本地。过程简单清晰明了直接上源代码：import urllib.requestimport...
python爬虫爬取图片代码_Python爬虫抓取指定网页图片代码实例
weixin_39854681的博客
11-21 979
想要爬取指定网页中的图片主要需要以下三个步骤：（1）指定网站链接，抓取该网站的源代码（如果使用google浏览器就是按下鼠标右键 -> Inspect-> Elements 中的 html 内容）（2）根据你要抓取的内容设置正则表达式以匹配要抓取的内容（3）设置循环列表，重复抓取和保存内容以下介绍了两种方法实现抓取指定网页中图片（1）方法一：使用正则表达式过滤抓到的 html 内容字符串# 第一个...
图片爬取全代码
m0_57126010的博客
12-30 583
import requests import os url = "http: / / image . nationalgeographic . com . cn/ 2017/0211/ 20170211061910157. jpg" root ="D: / /pics/ /" path = root + ur1. split('/') [-1] try : if not os.path. exists (root) : os . mkdir (root) if n...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值