python爬虫
文章平均质量分 78
逆流~
这个作者很懒,什么都没留下…
展开
-
python爬虫进阶--动态网页和正则表达式
python爬虫进阶–动态网页和正则表达式介绍上一篇使用最简单的方法爬取了唱吧一些歌曲,本篇介绍如何爬取更多歌曲,主要是以下两个问题。如何爬取动态加载的网页数据?如何解析出网页内嵌的script代码中的数据?分析一:打开我的唱吧主页,下拉,点击加载更多点击加载更多发现url并没有发生变化,但网页确实请求到了更多数据查了资料发现这是一种名叫ajax的技术,以下是百度百科的解释新的请求在网页审查元素的XHR中可以看到:进入(chrome) F12 -> network -&g原创 2020-11-17 00:04:26 · 537 阅读 · 0 评论 -
python最简单的方法爬取唱吧歌曲
第一个python爬虫–爬取唱吧歌曲介绍:最近刚开始学python做网页爬虫,试着写了一个简单的爬虫项目,用最简单的requests和Beautifulsoup实现。唱吧支持导出歌曲,但需要money,网页版在线听只能点一首听一首,所以想通过爬虫将歌曲音频下载到本地目标:尽可能多的爬取我的主页中的歌曲,下载保存到本地原创 2020-11-14 00:20:06 · 667 阅读 · 0 评论