使用python爬取2015-2024年中国大学排名
通过查找可以看见网页源代码是包含了前30所大学的排名信息,我们回到开始页面,通过点击发现,当我们点击下一页的时候网页的地址没有变化,这就说明了网页的信息并不是 只存在与源代码中,这时候我们就需要点击F12去开发者界面的network去查看日志。如果要对动态的网页就行抓包的话,我们一般查看XHR和JS这两个部分的信息,通过查找,我们发现XHR中没有我们想要的信息,那么就去JS中查找。f.write('排名,学校名称,城市,类型,得分,等级')这里可以看到,接口依然可以使用,并且上面有我们想要的所有信息。
原创
2024-08-07 17:33:02 ·
825 阅读 ·
0 评论