python读取文件时遇到非法字符的处理 UnicodeDecodeError: 'gbk' codec can't decode bytes in position

最新推荐文章于 2023-10-26 22:04:34 发布
最新推荐文章于 2023-10-26 22:04:34 发布
阅读量4.3k 收藏
点赞数 2
分类专栏： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Yan456jie/article/details/44466321
版权 
报错UnicodeDecodeError: 'gbk' codec can't decode bytes in position



ipath = 'D:/学习/语料库/SogouC.mini/Sample/C000013/18.txt'
uipath = unicode(ipath , "utf8")
# uipath = ipath.decode('utf8')
f = codecs.open(uipath,'r','gbk','ignore')
text = f.read()
f.close()


参数ignore会忽略非法字符
Yan456jie
关注
专栏目录
【yolo系列报错：UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0x98 in position 1093】
weixin_47869094的博客
08-11 682
这应该是windows特有的问题，因为win的默认编码方式为utf-8，而Python读入文本文件的默认编码方式为gbk。直接下载的源码一般没有任何问题，需要修改系统变量的python读取格式。直接修改yolov7的yaml为下面，粘贴即可运行。在跑数据集运行别人的配置文件，总是报错。这个是我在跑yolov7时候出现的问题。YOLOV7改进–增加小目标检测层。最后需要重启电脑，重启就会生效。话不多说，解决问题。
【yolov7报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode bytein position 2: illegal multibyte sequenc】
weixin_47869094的博客
08-03 1180
重新运行，如果在运行依旧报错，很大可能是读取的文件yaml不是utf-8的编码格式，需要检查编码格式，较为繁琐，建议去官网重新下载yolov7，重新运行。通过添加encoding='utf-8’参数，告诉Python在读取文件时使用utf-8编码，以解决UnicodeDecodeError的问题。这篇文章讲述的是python代码运行出错，可以参考这个文章，适用于代码少，找得到打开文件的代码使用。问题是系统的默认编码格式是GBK，而读取的yaml配置文件使用了其他编码格式。这里直接给出代码修改部分。
python3过滤文件中的非法字符
03-01
自己写的用python过滤文件中的非法字符的小程序。
python报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte，文本乱码解决方法
weixin_42473703的博客
01-24 3万+
这个异常报错是由于设置了参数errors默认为严格（strict）造成的，将其更改为ignore等即可。方法一：在参数中添加上encoding=‘gbk’ 或 encoding=‘utf-8’ ， 以及设置errors参数为errors=‘ignore’经测试发现笔者这里两种编码格式输出的文本内容均是乱码，证明我们要打开的文本不是gbk或utf-8编码格式。安装docx库：pip install python-docx。方法二：用笔记本打开另存为utf-8格式。方法三：使用docx库。
Python报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte
sweet_tea_的博客
06-20 4万+
Python报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte
python UnicodeDecodeError: 'gbk' codec can't decode bytes in position
huangxiansheng1980的专栏
09-15 4360
如果你的源码中只含有ANSI字符，如全是英文，那么编辑和保存源码时候，不需要额外的任何修饰和说明，但是如果你如果你还有中文的时候，那么你必须指定这个源码文件的编码格式。否则在你保存的时候会弹出错误，提示添加编码说明符，我使用python自带的IDE - IDLE。 对于中文的我们可以使用 # -*- coding: cp936 -*- 这行代码需要加到文件的第一行
关于UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte的解决办法
最新发布
weixin_42583802的博客
10-26 320
转自与这篇文章;
Python出现错误UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0xb4 in position 6
咳嗽的婧婧的博客
04-30 1458
UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0xb4 in position 6: illegal multibyte sequence 错误原因是因为解码错误，用gbk去解码unicode当然不行，所以我们在读取文本需要加入参数’r’，或者转为utf-8格式 解决方法：（两者都可） with open('words.txt','r',encoding='UTF-8') as f: text = f.read() with open('
遇到UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xa3 in position 4: invalid start byte的几种处理方法
phoenix339的博客
02-16 1万+
读取文件、解码字符串时，有时会遇到这样的报错： UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xa3 in position 4: invalid start byte UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0xa3 in position 4: invalid start byte 原因是使用utf-8、gbk编码方式读取这个文件或decode某个字符串时，遇到了无法解码的字符。 如果
‘gbk‘ codec can‘t decode byte 0x91 in position 8: illegal multibyte sequence问题与解决
qq_41434735的博客
09-21 1666
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
python 读文件报错：UnicodeDecodeError: 'gbk' codec can't decode byte in position
xiangrikuidweixiao的博客
01-09 1611
python读取文件报错： UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0xae in position 66: illegal multibyte sequence 解决办法：加上‘utf8’参数 f = open('order.log','r', encoding='utf8') ...
bug宝典PYTHON篇 UnicodeDecodeError: ‘gbk’ codec can’t decode
warrah 南极狼
12-04 480
使用jenkins参数化构建工程，python2.7执行maven install命令，在执行其中某一个工程的时候出现错误。maven build fontal-base start Traceback (most recent call last): File "/usr/local/application/plugins/build/svnbuild.py", line 104, in <m
文件读写错误坑 之 UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0xac in position
qq_41368074的博客
07-28 6175
我们在使用open()来打开txt文件进行读写的时候，有时会产生这种报错，这通常是由于文件编码格式不一致导致的，因此我们在打开时要对文件加以编码限制：即 #出错代码 f = open('./test.txt','r') #加上编码限制后 f = open('./test.txt','r',encoding = 'UTF-8') ...
解决Python读取文件时出现UnicodeDecodeError: 'gbk' codec can't decode byte...
weixin_30713953的博客
07-23 702
用Python在读取某个html文件时会遇到下面问题: 出问题的代码: 1 if __name__ == '__main__': 2 fileHandler = open('../report.html', mode='r') 3 4 report_lines = fileHandler.readlines() 5 for line in report...
UnicodeDecodeError: 'gbk' codec can't decode byte 0x80 in position 6268: illegal multibyte sequence
qq_41417824的博客
02-29 259
with open(filePath, 'r') as f: return imp.load_module(moduleName, f, "%s.py" % moduleName, (".py", "r", imp.PY_SOURCE)) ##改为 with open(filePath, 'rb') as f: return imp.load_module(moduleName,...
出现 UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0xb1 in position 5: illegal multibyte sequence
xss125的博客
02-24 3518
项目场景： 提示：这里简述项目相关背景： 例如：项目场景：python中查看csv文件，出现错误 问题描述： 出现如下问题： 原因分析： 存储的文件格式可能不是cvs格式，可能你只改了后缀。 解决方案： 右击文件，选择文章属性 可以看到你的文章的属性是xls类型，而不是csv。打开文件，选择另存为，文件类型一定要选择csv类型。 改了后得到的结果为： ...
关于UnicodeDecodeError: 'gbk' codec can't decode byte的解决办法
热门推荐
Passerby的博客
05-10 14万+
UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0xae in position 199: illegal multibyte sequence解决办法。
一文搞懂Python文件读取报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte
lyb06的博客
03-21 4万+
一文带你彻底搞懂报错原因，并掌握解决方法
UnicodeDecodeError: 'utf8' codec can't decode bytes in position 1252-1253: invalid continuation byte
08-15
在你的代码中，当使用`res.decode('utf-8')`对response进行解码时，出现了UnicodeDecodeError异常，提示`'utf-8' codec can't decode bytes in position 1252-1253: invalid continuation byte`。这个错误通常是由于...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值