爬虫从入门到入预(2)

本文探讨了Web请求的两种方式——服务器渲染和客户端渲染,重点讲解了HTTP协议的工作原理,包括请求和响应的结构,如请求行、请求头、响应头等。同时提到了浏览器抓包工具在获取数据请求URL中的作用,以及JSON作为数据交换格式的重要性。
摘要由CSDN通过智能技术生成

今天主要讲的是web请求和http协议,没有代码,直接放听课笔记:

#web请求
#1.服务器渲染,服务器把请求内容检索挑选并排序之后,写进html文件中,然后返回给浏览器
#2.客户端渲染,第一次请求获得html骨架,第二次请求获得相关内容,由浏览器进行拼接。“在页面源代码中看不到数据!”
#为了获得第二次请求的数据 ,则我们需要获得第二次请求的url,使用浏览器抓包工具获得
#数据和html框架并不是每次都会捆绑在一起,分开请求获得也许更好,数据会以标准的json形式保存

#http协议
#在http协议之下,计算机之间传输的是超文本(页面源代码),http也被称之为超文本传输协议。
#请求:请求行:请求方式(get:显式提交,查询信息,下载\post:隐式提交,修改信息,上传)-请求url-协议、请求头:服务器可能使用的附加信息、请求体:放请求参数
#响应:状态行:协议,状态码、响应头:客户端需要的附加信息、响应体:服务器返回的客户端真正需要的html和json
#请求头的关键信息:user-agent:请求载体的身份标识,referer:防盗链,cookie:本地字符串数据信息
#响应头的关键信息:cookie(用户登录信息,反爬的token)&各种神奇的字符串
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值