抓取唯美图库（BeautifulSoup）

最新推荐文章于 2024-09-29 14:13:49 发布

在路上哟～

最新推荐文章于 2024-09-29 14:13:49 发布

阅读量284

点赞数 1

分类专栏：网络爬虫文章标签： beautifulsoup 网络爬虫 python

本文链接：https://blog.csdn.net/m0_74261473/article/details/131646947

版权

网络爬虫专栏收录该内容

9 篇文章 0 订阅

订阅专栏

该代码示例展示了如何利用Python的BeautifulSoup库解析HTML，获取子页面链接，再通过requests库下载子页面中的图片。首先从主页面抓取图片链接，然后对每个链接发起请求获取图片内容，最后将图片内容保存至本地。

摘要由CSDN通过智能技术生成

使用BeautifulSoup

1、拿到主页面的源代码，然后提取到子页面的简介地址，href
2、通过href拿到子页面的内容。从子页面中找到导图片的下载地址 img -> src
3、下载图片



import requests
from bs4 import BeautifulSoup

url='https://www.umei.cc/bizhitupian/weimeibizhi/'
resp = requests.get(url)
resp.encoding='utf8'  # 处理乱码
# print(resp.text)

main_page = BeautifulSoup(resp.text,"html.parser")
alist = main_page.find('div',class_="Clbc_r_cont").find_all("img", class_="box_div_yj")
# print(alist)
for a in alist:
    src = a.get('src')  # 可以通过get就可以拿到属性的值
    # print(src)
    # 下载图片
    img_resp = requests.get(src)
    # img_resp.content # 这里拿到的是字节
    img_name = src.split("/")[-1]  # 拿到url中的最后一个/以后的内容
    with open("img/"+img_name,mode='wb') as f:
        f.write(img_resp.content)  # 图片内容写入文件

    print("ovwe!!!",img_name)
print("all over!!!")