Python三步爬取VMgirls小姐姐图片-CSDN博客

本文链接：https://blog.csdn.net/qq_45774939/article/details/117994285

本文介绍了如何使用Python爬取VMgirls网站的图片。首先确定目标网站，然后分析网页HTML源码和规则，最后编写代码实现爬取，包括请求、解析及获取图片URL和headers。

摘要由CSDN通过智能技术生成

Python三步爬取VMgirls小姐姐图片

具体思路

具体思路

第一步：确定目标：寻找目标网站，我选择的网站是http://www.VMgirls.com，这个网站我很喜欢。嘿嘿！（你懂的）
第二步：分析目标网站的html源码及网页规则
1.请求网页
2.解析网页
3.找到图片URL
4.找到网站hearders规则
第三步：编写代码

第一步：确定目标

网址：https://www.vmgirls.com/

第二步：分析目标网站

在这里插入图片描述通过开发者工具找到该网站的URL,不过该网站通过代码禁用了开发者工具。可用谷歌浏览器或者一些工具打开。

在这里插入图片描述不过当我们点击UR的时候，会发现跳出404网页。不过没关系，记录下该网址。

找到该网站的headers。

第三步：代码编写

"""
    Python爬取 https://www.vmgirls.com/ 网站的图片
"""
import requests
import parsel
import time


class VmGirlsPhotos(object):
    """
    类说明：下载 vmgirls图片网站的图集单页面
    """

    def __init__(self):
        self.server = "https://www.vmgirls.com/"
        self.target = "https://www.vmgirls.com/16703.html"
        self.headers = {
   
            "User-Agent"