2019-12-08 Python3 爬取THZ的图片

最新推荐文章于 2023-02-27 22:10:59 发布

minyang_yu

最新推荐文章于 2023-02-27 22:10:59 发布

阅读量2.2k

点赞数

分类专栏： Python3

本文链接：https://blog.csdn.net/minyang_yu/article/details/103448704

版权

本文详细介绍了使用Python3进行网络爬虫，目标是抓取THZ网站上的图片资源。通过requests库获取网页源码，再利用BeautifulSoup解析HTML，找出图片链接，最后使用os模块下载图片，实现自动化下载过程。

摘要由CSDN通过智能技术生成

import requests
import random
import re
import time
import os

user_list = ["Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.7 (KHTML, like Gecko) Chrome/7.0.514.0 Safari/534.7",
    "Mozilla/5.0 (Windows; U; Windows NT 6.0; en-US) AppleWebKit/534.14 (KHTML, like Gecko) Chrome/9.0.601.0 Safari/534.14",
    "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.14 (KHTML, like Gecko) Chrome/10.0.601.0 Safari/534.14",
    "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.20 (KHTML, like Gecko) Chrome/11.0.672.2 Safari/534.20",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/534.27 (KHTML, like Gecko) Chrome/12.0.712.0 Safari/534.27",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.1 (KHTML, like Gecko) Chrome/13.0.782.24 Safari/535.1",
    "Mozilla/5.0 (Windows NT 6.0) AppleWebKit/535.2 (KHTML, like Gecko) Chrome/15.0.874.120 Safari/535.2",
    "Mozilla/5.0 (W