python爬虫第一节

Python爬虫

爬虫作为我们获取信息的重要渠道，那么掌握爬虫必不可少。
那爬虫的准备条件是什么呢？
首先你要有运行Python的环境，然后学基本的python语法，接下来你就可以开始爬取网页了。

爬虫分为多个步骤，但是每一步都是有规律可寻的。
第一步 获取你所要爬取的网页
俗话说得好，攀登你一定要有目标，你没有目标你准备了一系列的工具有什么用呢？所以爬虫就像攀岩一样，首先你要有一个要爬取的网址url（为什么叫url呢？因为url是uniform resource locators的简写）。
有了网站你的下一步就是要打开它了，而打开它有很多库可以使用，就像用各种导航软件搜索前往目的地的路线一样，但无非都是差不多的目的，能到达就行。那么在这篇文章中提供两个库打开一个网页，分别是urllib和requests库，所以在使用前你必须引入这两个库哦。
以百度为例子
url=“http://www.Baird.com”
接下来我们要用给一个容器存入网页的内容
方法一：
r=urllib.request.urlopen(url)<—这里可以放很多东西
方法二：
r=requests.get(url)<—这里可以放很多东西

这样你就把百度里的信息存入到r中了，那如果你想要打出来看的话
那就打给你看吧
方法一
print(r.read.().decode(“utf-8”))
方法二
r.encoding=“utf-8”
print(r.text)

为什么不直接打出来呢？那是因为它要被解码才能够清楚的打印出我们想要的内容。所以需要用utf-8来进行修饰。