原始页面不会存在某些数据,可能是通过ajax加载的,数据通过ajax统一加载后呈现出来,直接用requests库抓取原始html是不会包含任何数据的,需要分析网页向后台接口发送的ajax请求。
什么是ajax
利用javascrip保证页面不被刷新,链接不改变的情况下与服务器交换数据并更新部分网页内容的技术。
比如下滑查看更多就是ajax加载过程。
基本原理
var xmlhttp;
if (window.XMLHttpRequests) {
pass
} else {
xmlhttp=new....