import requests
def proxiex_spider(): #定义一个函数
#1.确定爬取的url路径.heades参数
bast_url="https://www.kuaidaili.com/free/"
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36'}
#2.发送请求——requests模拟浏览器发送请求,获取响应数据
response=requests.get(base_url,headers=headers)
data=response.content#二进制方法接收数据
fb=open('D:/python xiaochengzi/ip.html','wb')
fh.write(data)
if__name__=='__main__':
proxiex_sider()#以函数名对函数进行调用
python程序员格式
最新推荐文章于 2022-10-10 17:18:29 发布