进阶篇3：网页爬虫的实现1——单线程爬虫

目录

一、Requests获取网页源代码

二、Requests与正则表达式

---

一、Requests获取网页源代码

 获取网页源代码的方法：

1.直接获取源代码

2.修改http头获取源代码

---

（一）、直接获取源代码

输入网址，直接利用代码获取即可。

代码如下：

import requests
html = requests.get('http://tieba.baidu.com/f?ie=utf-8&kw=python')
print (html.text)

（二）、修改http头获取源代码

        1.User-Agent如何获取？

        回到网站，例如 https://baike.baidu.com/item/