爬虫是Python必学的一个模块,使用Python爬虫我们可以很轻松的从网络中爬取我们想要的数据。如果你还是入门爬虫阶段或者不清楚爬虫的具体操作流程,我在下文教大家一些方法:
第一步:尝试请求
首先进入b站首页,点击排行榜并复制链接
https://www.bilibili.com/ranking?spm_id_from=333.851.b_7072696d61727950616765546162.3
现在启动Jupyter notebook,并运行以下代码
在上面的代码中,我们完成了下面三件事
- 导入requests
- 使用get方法构造请求
- 使用status_code获取网页状态码
可以看到返回值是200,表示服务器正常响应,这意味着我们可以继续进行。
第二步:解析页面
在上一步我们通过requests向网站请求数据后,成功得到一个包含服务器资源的Response对象,现在我们可以使用.text来查看其内容