Python 爬虫
文章平均质量分 61
~羽~.
只是野蛮生长
展开
-
resquests模块基本用法
resquests模块 常见的响应对象和方法 response.url:响应的URL,有时候响应的URL和请求的URL不一样。 response.status_code:响应状态码 response.requests.headers:响应对应的请求头 response.headers:响应头 response.requests.cookies:响应对应的请求的cookie;返回cookie的类型 response.cookies:响应的cookie response.json():自动将json字符串类型的原创 2021-05-12 16:10:56 · 378 阅读 · 1 评论 -
Python 爬虫基础
Python 爬虫基础 1、网络爬虫的概念:(概念性的东西总是要知道的) 网络爬虫又被称为网页蜘蛛,网络机器人)就是模拟客户端(主要指浏览器)发送网络请求,接收请求响应,一种按照一定规则,自动抓取互联网信息的程序。‘ 原则上,只要客户端浏览器所能做的事情,爬虫都能做 爬虫也只能获取客户端(浏览器)所展示的数据 说人话:模拟浏览器,发送请求,获取响应。 2、爬虫的作用: 数据采集:微博评论,信息收集,疫情信息收集,招聘网站信息收集,新闻信息,川普拉选票 软件测试:爬虫之自动化测试 1230抢票: 网站原创 2021-05-09 18:36:48 · 70 阅读 · 0 评论