实现百度搜索实时热点爬虫

本教程实现简单的百度榜单实时热点爬虫，爬取百度实时热点。

实现的思路是：首先爬取热榜页面内容，其次是解析热榜页面的内容，最终到获取到需要的内容。
在展示代码之前，我们先介绍代码中使用到的一些python库

相关技术介绍

Request库

Requests（https://github.com/psf/requests）库由Kenneth Reitz创建，支持Python 2.6-2.7, 3.3-3.7。Requests库可以实现HTTP协议中的GET、OPTIONS、HEAD、POST、PUT、PATCH、DELETE方法，还可以实现HTTPS代理，流下载，文件分块上传等。且Requests的参数设置采用Key/Value键值对的方式进行设置。我们在代码中使用Requests库用来构建HTTP请求获取页面。
安装Requests库时，如果安装了pip之后，直接执行命令：pip install requests即可安装Requests库。

Beautiful Soup库

Beautiful Soup（https://www.crummy.com/software/BeautifulSoup/）是一个可以从HTML或XML文件中提取数据的Python库。目前使用的是Beautful Soup 4。使用时，将一个HTML或XML文档传入Beautiful Soup，将得到一个bs4的对象，Beautiful Soup将传入的文档转换成一个树形对象。Beautiful Soup可以对文档树进行遍历、查找和修改。
安装Beautiful Soup库时，如果安装了pip之后，直接执行命令：pip install beautifulsoup4 即可安装Beautiful Soup库。
这里需要了解TAG的含义。TAG是HTML中的一个标签。如下所示：

<a class='cls' href='www.example.com'>Hello world</a><