第一个爬虫

在b站上看了up主python学习者的python教学视频 Python爬虫实战教程：批量爬取某网站图片

花了一些时间写了自己的第一个爬虫

以此记录

 效果如图

 代码如下：

"""请求网页"""
import requests
import re
import time
import os
headers={
    'User-Agent': 'QG-demo1'
}
"""告诉别人自己的身份"""
response=requests.get('https://www.vmgirls.com/13344.html',headers=headers)
print(response.request.headers)
html=response.text
print(html)

"""解析网页"""
#抓取目录名字
dir_name=re.findall('<h1 class="post-title h1">(.*?)</h1>',html)[-1]
print(dir_name)

if not os.path.exists(dir_name):
    os.makedirs(dir_name)
#抓取图片