Python requests库基础 爬取网页信息

学习目标：

掌握requests库的基本使用方法

学习内容：

1、爬虫的使用方法：
-指定url
-发起响应
-获取响应数据
-持久化存储
2、案例实现

1）百度页面爬取

下面展示一些 内联代码片。

import requests
if __name__=='__main__':
    url='https://www.baidu.com/'#获取百度的url
    
    response=requests.get(url=url)#发起响应
    #获取响应数据
    page_text=response.text
    #持久化存储
    with open('./baidu.html','w',encoding='utf-8') as fp:
        fp.write(page_text)