python_处理request返回的数据编码_最好的解决方法！

最新推荐文章于 2024-03-29 18:26:22 发布
最新推荐文章于 2024-03-29 18:26:22 发布
阅读量1.8k 收藏 3
点赞数 1
分类专栏： python 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_41244495/article/details/105143573
版权

我写这个的原因就是， 因为自己遇见的这个错误，不能完美的解决好，找了半天，发现简单的一行代码就解决了：

 

rep = requests.get(url=vl)  # 发送请求
rep.encoding = "utf-8"  # 一般是这么写的，但是有时候，你查询很多个站点，每个站点的编码不一样的时候，这种写死的编码就很傻逼了

换下面这种写法：

rep.encoding = rep.apparent_encoding #  获取返回的数据编码进行设置， 不管请求的是那种编码，都不需要自己去判断编码和设置了

就这样完美解决了哦！！！！

 

小夙o
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Request继承体系，获取请求数据，Request通用方式获取请求参数
weixin_54048131的博客
10-23 420
获取URL(统一资源定位符): http://localhost:8080/request-demo/req1。获取请求参数(GET方式): username=zhangsan&password=123。注意: 浏览器发送的POST请求才有请求体 如果是纯文本数据:getReader()获取URI(统一资源标识符): /request-demo/req1。获取虚拟目录(项目访问路径): /request-demo。User-Agent,F12可以打开看内容。获取请求方式: GET。
python获取网页编码的方法
HelloHaibo的博客
08-27 6529
当我们使用python进行网页访问时候，需要对网站返回的数据进行处理，并加以使用，但是网页编码格式多种多样，我们如何判断当前网站返回的网页是什么编码格式呢？ 一般有两种种方法： 一、直接将返回的数据输出info()，查看Content-Type项对应的charset值，其实这一步也可以通过浏览器查看。 代码： import urllib2 headers = {"User-Agent":
无缝集成：利用Requests库轻松实现数据抓取与处理
愤怒的阿木木的博客
05-12 921
本文介绍了Python中常用的第三方库Requests的基本用法和高级功能。我们学习了如何发起HTTP请求、处理响应、使用会话对象、设置代理和证书验证等技巧。Requests库简单易用，功能强大，适用于各种网络操作场景。无论是进行Web开发、爬虫任务还是API访问，Requests库都是一个不可或缺的工具。通过掌握Requests库的使用，我们能够更加高效地进行网络请求和数据交互。希望本文能够帮助读者深入理解Requests库的使用，从而在实际项目中更好地应用。
request对数据的操作
舔舔柠檬
06-10 307
request对数据的操作 响应数据 响应内容 获取响应数据内容: res.text 获取HTML文本 res.content 获取二进制流 res.json() 获取json数据 res.encoding 获取响应的格式 res.encoding = ‘utf-8’ 更改获取到的格式 其中Text是以文本的格式打开内容，常用来查看html网页 Content是以二进制的格式打开内容，常用来查看非文本的内容，如视频，图片，声音等
python爬虫——request模块讲解，从零开始学数据结构和算法
最新发布
2301_82242296的博客
03-29 948
get。
Python request中文乱码问题解决方案
12-16
然而，如果服务器没有正确设置或传递编码信息，或者服务器返回的数据实际编码与声明的编码不一致，就会出现乱码问题。 解决Python `requests`获取中文网页乱码问题的方法主要有以下两种： 1. **使用`r.text`**： ...
06_Python3处理Nginx日志.zip
08-23
在本项目"06_Python3处理Nginx日志.zip"中，我们将探讨如何使用Python语言高效地处理Nginx服务器的日志文件。Nginx日志是记录Web服务器活动的重要工具，其中包含了访问者的信息、请求的URL、响应状态码等关键数据。...
python爬虫开发之Request模块从安装到详细使用方法与实例全解
12-20
Python爬虫开发中，Request模块是一个非常重要的工具，它提供了简单易用的API来处理HTTP请求。Request模块的安装可以通过命令行工具CMD，使用`pip install requests`指令进行。一旦安装完成，就可以在Python环境中...
Python request使用方法及问题总结
12-20
- 第二种方式：`requests.get(url, data=data, headers=headers)`，这种方式适用于表单数据，数据会被编码并添加到URL中，但不推荐用于包含特殊字符的参数。 2. **GET方式的注意事项** - `url`中的参数只支持`...
java_python_socket.zip
09-09
需要注意的是，实际的Socket通信可能会涉及到异常处理、多线程、数据编码解码、以及更复杂的网络协议（如HTTP、FTP等）。此外，由于Java和Python的IO模型和线程模型的不同，它们在处理并发连接时可能有不同的策略。...
Python项目开发实战_网络爬虫批量采集股票数据保存到Excel中_编程案例实例课程教程.pdf
05-02
接下来，使用Python的urllib.request模块来发送HTTP请求获取网页内容，然后使用编码转换（例如GBK）处理返回的二进制数据。接着，借助正则表达式模块re，编译一个匹配股票代码的正则表达式模式，如`s = r'<li><a ...
python爬虫 urllib模块url编码处理详解
01-20
案例：爬取使用搜狗根据指定词条搜索到的页面数据（例如爬取词条为‘周杰伦’的页面数据） import urllib.request # 1.指定url url = 'https://www.sogou.com/web?query=周杰伦' ''' 2.发起请求:使用urlopen函数对...
python使用post提交数据到远程url的方法
09-22
首先，我们需要导入Python的几个内置库，它们在处理HTTP请求和数据编码时起到关键作用： ```python import sys import urllib2 import urllib ``` 1. **`urllib`** 库提供了URL编码和解码的功能，我们可以通过它将...
python_requests快速入门归纳.pdf
02-12
`requests.get()`方法用于发送GET请求，返回一个Response对象，保存了服务器的响应信息。除了GET，requests库还支持其他HTTP请求方法，如POST、PUT、DELETE、HEAD和OPTIONS，用法与GET类似： ```python r = requests...
Python_source_files-python source file
03-25
1. PEP 8：Python社区广泛遵循的编码风格指南，包括缩进、命名约定、注释和文档字符串等方面。 2. 注释和文档字符串：清晰的注释有助于他人理解代码，而文档字符串（三引号包围的字符串）用于生成模块、函数和类的...
Request对象（获取请求数据中的乱码问题）
但行好事 无问西东
12-05 2171
中文乱码问题： 在web目录下创建register3.html <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> </head> <body> <form...
python爬虫requests模块的编码流程
weixin_45619473的博客
05-16 1955
Requests模块的编码流程 1.指定url url ='https://www.baidu.com/s?tn=25017023_5_dg&ch=1&ie=UTF-8'#1.指定url 2.发送请求 主要用到response.get()函数和response.post函数 response.get()函数 response = requests.get(url=url,params=param, headers=head)#2.发起请求 get函数的url参数就是你指定的url；
关于request请求后返回值的编码问题
qq_63096812的博客
09-22 980
request请求页面出现乱码
python_request返回中文乱码
热门推荐
qq_38318303的博客
04-27 1万+
POST从网页中获取数据，由于编码问题，出现乱码。方法：```response = session.get('http://xxxx')print(response.encoding)response.encoding = 'utf-8'print(response.json())```原因：１．因为数据源的编码声明不规范，导致 reuqests 无法判断出返回数据的正确编码，从而使用了它的默认编...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值