python爬取网页数据

最新推荐文章于 2024-09-27 17:31:02 发布

耶斯耶斯呀

最新推荐文章于 2024-09-27 17:31:02 发布

阅读量389

点赞数 9

文章标签： python 开发语言

本文链接：https://blog.csdn.net/m0_67680475/article/details/136276314

版权

该文章提供了解决爬取中文网站乱码问题的Python代码，使用requests库设置UTF-8编码。

摘要由CSDN通过智能技术生成

此代码是在多次爬取中文变乱码之后修改来的正确版本（如有需要修改网站即可食用）

代码

import requests


def get_html(url):
    try:
        response = requests.get(url) #发起请求得到响应对象
        response.encoding = 'utf-8'  # 改变编码
        print(response.encoding)
        html = response.text #获取响应数据返回字符串形式
        return html
    except:
        print('请求网址出错')


url = 'http://www.zgzyz.org.cn/node_22005.htm'#指定url
html = get_html(url)
print(html)