第12讲：Ajax 的原理和解析

最新推荐文章于 2022-12-26 20:08:08 发布

安替-AnTi

最新推荐文章于 2022-12-26 20:08:08 发布

阅读量229

点赞数

分类专栏： Python

本文链接：https://blog.csdn.net/weixin_35770067/article/details/105505827

版权

Python 专栏收录该内容

75 篇文章 2 订阅 ¥299.90 ¥399.90

订阅专栏

本文介绍了Ajax的原理，通过JavaScript实现异步数据加载，保持页面不刷新。讲解了Ajax的基本流程，包括发送请求、解析内容和渲染网页，并通过分析微博下拉刷新的实例展示了如何捕获和模拟Ajax请求，帮助理解如何抓取Ajax加载的数据。

摘要由CSDN通过智能技术生成

当我们在用 requests 抓取页面的时候，得到的结果可能会和在浏览器中看到的不一样：在浏览器中正常显示的页面数据，使用 requests 却没有得到结果。这是因为 requests 获取的都是原始 HTML 文档，而浏览器中的页面则是经过 JavaScript 数据处理后生成的结果。这些数据的来源有多种，可能是通过 Ajax 加载的，可能是包含在 HTML 文档中的，也可能是经过 JavaScript 和特定算法计算后生成的。

对于第 1 种情况，数据加载是一种异步加载方式，原始页面不会包含某些数据，只有在加载完后，才会向服务器请求某个接口获取数据，然后数据才被处理从而呈现到网页上，这个过程实际上就是向服务器接口发送了一个 Ajax 请求。

按照 Web 的发展趋势来看，这种形式的页面将会越来越多。网页的原始 HTML 文档不会包含任何数据，数据都是通过 Ajax 统一加载后再呈现出来的，这样在 Web 开发上可以做到前后端分离，并且降低服务器直接渲染页面带来的压力。

所以如果你遇到这样的页面，直接利用 requests 等库来抓取原始页面，是无法获取有效数据的。这时我们需要分析网页后台向接口发送的 Ajax 请求，如果可以用 requests 来模拟 Ajax 请求

了解本专栏