python爬虫实例教程之豆瓣电影排行榜--python爬虫requests库

我们通过requests库进行了简单的网页采集和百度翻译的操作，这一节课我们继续进行案例的讲解–python爬虫实例教程之豆瓣电影排行榜，这次的案例与上节课案例相似，同样会涉及到JSON模块，异步加载以及局部加载方式等内容，接下来我们一一讲解操作方法。

1.主要获取的内容

我们主要通过豆瓣电影排行榜（）

这个网站获取到影片的相关信息，如链接、片名、评分等内容（如下）

2.分析解题思路

首先我们打开我们要爬取的网址，我们会发现通过拖动鼠标滑块，电影是不断被加载出来的，并且网址不发生变化，因此我们是不是能立刻联想到上节课做的案例百度搜索有异曲同工之处–ajax异步，因此我们获取网址信息、headers、关键词等信息，不能再通过all查看，而是选择xpath查看（如下图）最后，如果你的时间不是很紧张，并且又想快速的提高，最重要的是不怕吃苦，建议你可以联系维：762459510 ，那个真的很不错，很多人进步都很快，需要你不怕吃苦哦！大家可以去添加上看一下~

3.书写代码