py 爬取搜狗首页

最新推荐文章于 2022-02-22 16:44:16 发布

xiangzilong

最新推荐文章于 2022-02-22 16:44:16 发布

阅读量187

点赞数

分类专栏： python 文章标签： Python requests 网络爬虫 GET请求 HTML

本文链接：https://blog.csdn.net/qq_36270681/article/details/111185771

版权

python 专栏收录该内容

41 篇文章 0 订阅

订阅专栏


import requests
# requests 模块：模拟浏览器发送请求
'''
如何使用：
    -指定url
    -发请求
    -获取响应数据
    -持久化存储
环境安装： pip install requests
'''

if __name__ == '__main__':
    #指定url
    url = 'https://www.sogou.com/'
    #发送请求
    #get 方法会返回一个相应对象
    response = requests.get(url=url)
    #获取相应数据,text 返回的是字符串形式的响应数据
    page_text = response.text
    print(page_text)
    #持久化数据，保存到当前路径
    with open('./sogou.html','w',encoding='utf-8') as fp:
        fp.write(page_text)
    print('爬取数据结束')