![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫基础知识
爱耍流氓的兔子
这个作者很懒,什么都没留下…
展开
-
python 爬虫(cookie)
cookie和session区别cookie数据存放在客户浏览器上,session数据放在服务器上 cookie不是很安全,别人可以分析放在本地的cookie并进行cookie欺骗 session会在一定时间上保存在服务器。当访问增多,会比较占用服务器的性能。 单个cookie保存的数据不能超过4K,很多浏览器限制到一个站点最多保存20个cookie爬虫处理cookie和session带上cookie、session的优点:能够请求到登录后页面带上cookie、session的弊端:原创 2022-05-13 14:03:56 · 4136 阅读 · 1 评论 -
python 爬虫基础知识
web请求过程分析服务器渲染:在服务器那边直接把数据和html整合在一起,统一返回给浏览器,在页面代码中中能看到数据 客户端渲染 :第一请求只要一个html骨架,第二次请求拿到数据,进行数据展示,在页面的代码中,看不到数据, 要熟练使用浏览器抓包工具requests函数http常用的请求方法为:get,postGET请求get请求,指定urlresp=requests.get(url)反爬,首先指定http 请求头的User-Agent:headers参数一般是字典.原创 2022-05-10 16:01:00 · 454 阅读 · 1 评论