记录自己的第一个爬虫程序

最新推荐文章于 2024-10-18 14:25:40 发布

hddlsj

最新推荐文章于 2024-10-18 14:25:40 发布

阅读量311

点赞数 1

文章标签：爬虫 python

本文链接：https://blog.csdn.net/hddlsj/article/details/123161993

版权

#导入第三方 模块
import  requests

#请求的网址
url='https://www.baidu.com/'

#为什么要写headers ,是应为反爬手段 ，伪装成浏览器
headers={'User-Agent': 'Mozilla/5.0(Windows NT 10.0; Win64; x64) AppleWebKit/537.36(KHTML, like  Gecko) Chrome/80.0.3987.100 Safari/537.36'}


#resp就是响应结果
resp=requests.get(url,headers=headers)

#print(resp)

print(resp.request.headers)

主要了解：

输出结果

"E:\python\Python ces\venv\Scripts\python.exe" "E:/python/Python ces/day01.py"
{'User-Agent': 'Mozilla/5.0(Windows NT 10.0; Win64; x64) AppleWebKit/537.36(KHTML, like  Gecko) Chrome/80.0.3987.100 Safari/537.36', 'Accept-Encoding': 'gzip, deflate', 'Accept': '*/*', 'Connection': 'keep-alive'}

进程已结束,退出代码0