Linux 运行 python 出现的字符串编码问题

最新推荐文章于 2022-11-09 14:25:05 发布
最新推荐文章于 2022-11-09 14:25:05 发布
阅读量698 收藏
点赞数
分类专栏： Python 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lerosm/article/details/90177936
版权
本文介绍了在Linux系统中运行Python时遇到的字符串编码问题。当在终端输入中文字符串，尽管`print()`正常显示，但其内部编码格式与Python的utf-8默认编码不符。解决方法涉及理解Linux系统编码、Python编码和文件编码的概念，并可以通过修改Linux系统编码来匹配Python的解码方式，确保数据正确解析。
摘要由CSDN通过智能技术生成

Linux 运行 python 出现的字符串编码问题

最近在想在树莓派上利用python爬去数据的时候遇上了点编码的问题，google查了一通之后还是靠自己摸索了一些解决方案，这里总结记录一下。

所遇问题

我在终端输入的中文字符串似乎被python自动转码了,虽然print()出来还是正常的中文，而且python默认编码格式也是utf-8，但是它的值，是个我不熟知的编码格式
中文字符串被自动转码

知识储备

为了解决这个问题，我们需要先了解以下知识

linux系统编码、python编码和文件编码的概念

  • 系统编码：
    系统编码是linux系统默认的编辑器的编码方式，它的作用是，我们所有通过编辑器输入的内容都将根据该编码方式转成二进制流存入到系统磁盘中。linux下可以通过 locale 命令查看系统编码(各个版本的linux系统可能都不相同)
  • python编码：
    指的是python内设置的解码方式，是python编译器将二进制流解码的一个规范，默认的是ascii解码方式（python3 似乎是 utf-8），一般来说如果源码中不存在中文的话，ascii则完全没有问题。
  • 文件编码：
    文本的编码方式，是你的一个文件内 内容的
最低0.47元/天 解锁文章
lerosm
关注
专栏目录
linux运行python乱码_linux下python中文乱码解决方案详解
weixin_39946266的博客
12-03 2214
linux下python中文乱码解决方案详解1. 场景描述linux服务器下安装了Anaconda3，执行Pyhton的K-means算法，结果出现如下图的中文字符乱码。上次已经解决了，忘记记录解决流程了，这次配置了一台新的服务器，又出现，默认不配置的话matplotlib画图就会乱码，这次把解决过程记录下，希望能帮助自己和有需要的朋友。2. 解决方案网上有好几个解决方案，只介绍自己实战可行的。1...
python运行编码格式_python,linux_python在linux下运行的编码问题，python,linux - phpStudy...
weixin_40007515的博客
12-03 303
python在linux下运行的编码问题程序是去本地execel表格中提取数据。问题是，当采用linux默认编码(LANG=en_US)的时候，在读取excel文件中表的名字的时候会报错(表的名字中有数字和汉字)。最前面已经写# -- coding:utf-8 --def get_standard_template_infos():excel_files = get_excel_files(c...
Linux 执行python脚本时格式字符串报错“SyntaxError: invalid syntax”
热门推荐
ChenYX的博客
09-22 20万+
服务器部署python3代码时格式字符串报错“SyntaxError: invalid syntax”
解决Linux下Python编码问题，以及导入模块的问题
许RR的博客
11-30 1980
今天想把win上抓取代理IP的代码迁移到Ubuntu上，然后写成定时任务，然后同项目小组的人直接调用服务器上api就能返回已经能用的代理IP地址以及端口，遇到了两个小问题。1. 模块的引入问题 我编写Python的IDE是eclipse+pydev，每次在win上运行的程序同一个包内引入程序也必须通过from [package] import [module]的方法导入同一个包下的模块 如果
linux之系统编码，python编码，文件编码
weixin_34290352的博客
05-14 271
1前言如果你对python2和python3的中编解码很清楚，这里我认为你很清楚。具体参考文档：“python2 encode和decode函数说明.docx”“字符编码——从ASCII开始.docx”以上所有文档均为本地文档。2Python编码sys.getdefaultencoding():获取系统当前编码，这里的系统指的是python自己的内置系统...
python在windows和linux下有什么不同_Python处理文本在Linux和windows下有什么异同？
weixin_39784774的博客
11-21 483
之前写过一段Perl脚本，可以一下子删除代码中的所有C语言注释。我大致浏览了一下Python的re模块，感觉差不多。依然是把一个C文件读成一个字符串然后使用sub()进行匹配删除。发现“/× ×/”注释总是无法识别，很是苦恼。开始以为是正则表达式在两种语言下有差异，后来发现Python代码在Linux环境中正常在Windows下面异常。正则表达式是一样的，以下是Python代码哪位大神给解释下为什...
浅谈python下含中文字符串正则表达式的编码问题
10-17
因此，了解如何在Python中正确处理字符串编码，对于编写能够正确处理中文字符的正则表达式至关重要。 首先，需要明确的是，Python文件中可以使用不同的编码格式来存储中文字符，常见的编码有UTF-8、GBK和GB2312等。...
python 遍历字符串 字符_python 遍历字符串(含汉字)实例详解
weixin_39859061的博客
12-19 1627
python 遍历字符串(含汉字)实例详解python 遍历字符串(含汉字)实例详解s = "中国china"for j in s:print j首先一个，你这个'a'是什么编码？可能不是你所想的gbk>>> a='中国'>>> a这样试试看，如果出来是6个字(word)，说明是utf-8，如果是4个字，说明gbk。另外，不管是utf-8还是gbk，都不能这样遍...
Python获取系统默认字符编码的方法
09-21
需要注意的是，这个编码方式并不是操作系统级别的默认编码，而是Python解释器内部处理字符串时所采用的编码方式。 #### 实例演示 下面通过一个简单的例子来展示如何使用`sys.getdefaultencoding()`方法获取系统...
linux python open,Python open() 函数 文件处理
weixin_29470893的博客
05-14 201
Python函数：open()1：作用：打开一个文件2：语法：open(file[, mode[, buffering[, encoding[, errors[, newline[, closefd=True]]]]]])3：参数说明：file： 要打开的文件名，需加路径(除非是在当前目录)。唯一强制参数mode： 文件打开的模式buffering： ...
利用python操作mrjob实例---wordcount
weixin_30615767的博客
08-28 471
网上利用java实现mr操作实例相对较多,现将python实现mr操作实例---Wordcount分享如下: 在操作前,需要作如下准备: 1.确保linux系统里安装有python3.5,python3.6以上考虑到兼容性不是太友好,之前也踩过相应的坑。（这里对python3.5的安装不作细述，需注意环境的配置正确！） 2.安装mrjob：pip install mrjob（这里...
树莓派python编程有中文注释就报错:SyntaxError: Non-ASCII character
海晨威
07-15 6345
py文件首行加上此句： #coding=utf-8 人生苦短，我用python~
Linux下运行python3，出现UnicodeEncodeError: ascii codec cant encode character的解决方案
null_zhao的博客
05-22 1449
Linux下运行python3，出现UnicodeEncodeError: 'ascii' codec can't encode character的解决方案: 在python代码里 with open(encoding="utf8") 只能解决部分文件读取问题 运行shell命令export LANG=“en_US.UTF-8”，可完全解决
在树莓派上安装编译的vim——开启python3支持
最新发布
金装二百五博客
11-09 913
kali 系统的树莓派安装编译版本的 vim 9.0
Python3 编码问题：UnicodeEncodeError: 'ascii' codec can't encode character '\U0001f621' in posit
木筱雪的专栏
06-24 1万+
错误描述及分析 最近跑程序遇到一个很神奇的问题，程序在输出的时候，前面都是正常的，但是中间同样的code在执行的时候却报错： UnicodeEncodeError: ‘ascii’ codec can’t encode character ‘\U0001f621’ in posit 在本地打印出’\U0001f621’，显示是一个愤怒的表情： print('\U0001f621') 但是...
树莓派运行Python3出现的Error总结
Wtrmfsh
03-19 3082
1、OSError: [Errno 98] Address already in use 原因：基础错误。程序重复启动了； 方案：检查该文件，杀掉之前已经运行的进程；再次运行该 .py文件即可。 2、TypeError: type NoneType doesn't define __round__ method ——类型错误：round方法无法处理 NoneType类型 原因：基础错误。round...
SM2 加解密注意事项
yinianjian2017的博客
04-11 1万+
SM2 加解密联调时走过的坑1、密文数据，有些加密硬件出来密文结构为 C1|C2|C3 ，有些为 C1|C3|C2 , 需要对应密文结构做解密操作2、有些加密硬件，公钥前加04 ，私钥前加00，密文前加04 ，在处理时候，可以根据长度处理，尤其 04 的处理。基于bouncycastle 软实现加解密网上资料较多，不再阐述。目前可以实现加密硬件和软实现互通，再有新问题继续更新。...
python SM2明文密码加解密
高压锅博客
02-07 1万+
1. 安装依赖包 pip install gmssl 2. 封装类 sm2encry.py from gmssl import sm2 from base64 import b64encode, b64decode # sm2的公私钥 SM2_PRIVATE_KEY = '00B9AB0B828FF68872F21A837FC303668428DEA11DCD1B24429D0C99E24EED83D5' SM2_PUBLIC_KEY = 'B9C9A6E04E9C91F7BA880429273747D7
Windows下Python实现图像转ASCII字符串脚本
本篇文章主要介绍了如何使用Python实现将图像转换为ASCII文本字符串，特别适用于Windows环境。作者在Linux环境下遇到问题后，针对Windows平台进行了适配，并提供了详细的代码和步骤。以下是文章中的关键知识点： 1....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值