python爬取百度图片

最新推荐文章于 2021-08-07 12:28:28 发布

wqjhky

最新推荐文章于 2021-08-07 12:28:28 发布

阅读量856

点赞数 2

文章标签： python url 百度图片

本文链接：https://blog.csdn.net/wqjhky/article/details/75760846

版权

利用Python进行网络爬虫，本次目标是百度图片搜索页面，通过解析HTML获取图片URL。本文将分享具体的爬取过程和代码实现。

摘要由CSDN通过智能技术生成

在之前通过爬取贴吧图片有了一点经验，先根据之前经验再次爬取百度搜索界面图片

废话不说，先上代码

#!/usr/bin/env python
# -*- coding: utf-8 -*-
# @Time    : 2017/7/22 10:44
# @Author  : wqj
# @Contact : wqjhky@gmail.com
# @Site    : 
# @File    : test.py
# @Software: PyCharm Community Edition
import requests
import re
import os

url = r'http://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gbk&word=%B1%ED%C7%E9%B0%FC&fr=ala&ala=1&alatpl=adress&pos=0&hs=2&xthttps=000000'
dirpath = r'D:\img'

html = requests.get(url).text
urls = re.findall(r'"objURL":"(.*?)"', html)

if not os.path.isdir(dirpath):
    os.mkdir(dirpath)

index = 1
for url in urls:
    print("Downloading:", url)
    try: