import requests import os from bs4 import BeautifulSoup import re # 初始地址 all_url = 'http://www.7160.com/xiaohua/' #保存路径 path = 'H:/school_girl/' # 请求头 header = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 UBrowser/6.1.2107.204 Safari/537.36' } #################################开始请求(多列表)################################# html = requests.get(all_url,headers = header) start_html = html.text.encode('iso-8859-1').decode('gbk') # 将gb2312转为UTF-8格式 #################################开始解析################################# soup = BeautifulSoup(start_html,'lxml') #查找最大页码 page = 255 # 同一路径 same_url = 'http://www.7160.com/xiaohua/' for n in range(1,int(page)+1): ul = same_url + '
爬虫实战--基于requests 和 Beautiful的7160美图网爬取图片
最新推荐文章于 2024-02-05 00:33:03 发布
本文展示了如何使用Python的requests和BeautifulSoup库爬取7160美图网站上的图片。通过示例,详细记录了从阳光下校花美女和黑长直发美女学生的图片链接,包括不同尺寸的版本。
摘要由CSDN通过智能技术生成