爬取图片简易爬虫

最新推荐文章于 2024-09-23 18:41:35 发布

名字都被取了

最新推荐文章于 2024-09-23 18:41:35 发布

阅读量2.3k

点赞数

分类专栏： Python爬虫文章标签：爬虫

本文链接：https://blog.csdn.net/m0_52455276/article/details/118920361

版权

这篇博客介绍了如何编写一个简单的Python图片爬虫，包括使用requests模块建立网络连接，解析HTML并利用XPath提取图片链接，最后下载图片到本地。教程以一个实际的图片网站为例，展示了从获取网页到清洗数据的完整过程。

摘要由CSDN通过智能技术生成

爬虫是一种解放个人劳动的高效方法，本文将为大家教授最简单的图片爬虫教程。由于我几乎都是自学的，所以名词可能不太专业，望见谅。

此篇文章我找了一个爬取图片的例子，如这位漂亮小姐姐

那么，方法如下

先上函数

def get(url):

    header = {
        'Referer': 'https://www.meitu131.com/',
        'sec-ch-ua': '"Google Chrome";v="89", "Chromium";v="89", ";Not A Brand";v="99"',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (XHTML, like Gecko) '
                      'Chrome/89.0.4389.114 Safari/537.36 Edg/89.0.774.68 '
    }
    response = requests.get(url=url, headers=header)
    response.encoding='utf-8'
    ret