python爬虫学习（1）

request请求

使用request模块爬取简单的搜狗网页内容

# -*- coding: utf-8 -*-
"""
Spyder Editor

This is a temporary script file.
"""
import requests

# request 模块： python 中原生的一款基于网络请求的的模块，功能非常强大

if __name__ == '__main__':
    # 指定URL
    url = 'https://www.sogou.com/'
    # 发起请求
    response = requests.get(url=url)
    # 结果处理
    page_text =  response.text
    print(page_text)
    # 将结果保存到htlm文件中，用浏览器打开，可以发现已经成功的爬取到搜狗的首页数据
    with open('./sogou.html', 'w', encoding=('UTF-8')) as fp:
        fp.write(page_text)