UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 1: invalid start byte

最新推荐文章于 2024-09-04 06:00:00 发布
最新推荐文章于 2024-09-04 06:00:00 发布
阅读量1.9k 收藏 2
点赞数
分类专栏： pandas Python 文章标签： python bug
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Spicrab/article/details/108452581
版权
在尝试使用pandas读取csv文件时遇到'UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 1: invalid start byte'错误。尽管文件看起来正常，但问题可能与文件编码有关。参考StackOverflow上的建议，通过使用不同的编码方式（如答主MSalty推荐的）成功解决了问题。
摘要由CSDN通过智能技术生成

Error

用pandas读取一个csv文件时出现该错误：

import pandas as pd
df = pd.read_csv('filename', index_col=0)

error message为UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 1: invalid start byte.

Solution

虽然在检查了该csv文件后未发现第一行文本有问题，但这个错误一定与utf-8无法解码文本有关。在这个StackOverflow post上查到一个解决方法是用别的enc

最低0.47元/天 解锁文章
Spicrab
关注
专栏目录
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xc1 in position 41694: invalid start byte解决方案
weixin_43178406的博客
03-31 1万+
本文主要介绍了UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xc1 in position 41694: invalid start byte解决方案，希望能对学习Python的同学有所帮助。 文章目录 1. 问题描述 2. 解决方案
爬虫编码UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xb1 in position 78: invalid start byte解决方案
热门推荐
weixin_43178406的博客
05-10 8万+
本文主要介绍了爬虫编码UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xb1 in position 78: invalid start byte解决方案，希望能对学习python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Python3 解决 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
BRAVE MAN的博客
11-23 6715
一、问题 　　request.Request(url，headers=headerDict))的时候出现异常信息：'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte 二、解决方案 　　http头中headerDict参数："Accept-Encoding": "gzip, deflate", 　　代...
UnicodeDecodeError: ‘utf-8‘ Codec Can‘t Decode Byte 0x80 in Position 0**：UTF-8编码无法解码字节0x80的完美解决方法
最新发布
沉淀、分享、成长，让自己和他人都能有所收获！
09-04 1074
在未来的文章中，我将继续探讨Python编程中的常见错误与优化策略，帮助大家提高代码的健壮性和可读性。通常情况下，这个错误发生在处理非UTF-8编码的数据时，而你却使用了UTF-8解码器。本文将深入分析这个错误的成因，并提供有效的解决方案，以帮助你在处理文本数据时避免此类问题。通过阅读本篇文章，你将对字符编码有更深的理解，并能熟练应对与之相关的错误。是最常见的错误之一，尤其是在处理非UTF-8编码的数据时。通过这个函数，你可以将任何编码的文件转换为UTF-8，从而避免后续的编码问题。
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position
CHENYAoo的博客
10-10 1万+
用python写的代码，大致是以下内容出错 import os # 使用os获取mypath文件夹内的文件 dir = os.listdir("mypath") # dir=[file1,file2,file3] for file in dir: with open(file,"rt") as f # “rt”表示以文本模式读取文件，默认是utf-8编码 # do...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0: invalid start byte
martinkeith的博客
08-05 1944
报错内容：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 环境：Ubuntu16.04 + pycharm 2018.3 解决方法：open文件时使用‘rb’方式 问题分析：数据文件在保存时以二进制形式保存，读取时应以二进制形式读取。原因看似简单，但在写行数较多的程序时经常会忽略，导致运行过程中报错。 ...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0: invalid start byte解决方案
qq_41175546的博客
11-22 2029
我的出错定位在这里 pickle模块反序列化模型文件时出错 dd = pickle.load(open(fname_or_dict)) 查了很多博客，utf-8，iso-8859-1，gbk，latin1都试过了，还是报错 然后试了这个方法，将这行改成 dd = pickle.load(open(fname_or_dict,"rb"),encoding='iso-8859-1') 然后就成功了，特此记录。 ...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 109130: invalid start byte
Eve_Shieh的博客
11-11 1660
成功解决‘UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 109130: invalid start byte’
UnicodeDecodeError: utf-8 codec cant decode byte 0x8b in position 1: invalid start byte
qq_36380748的博客
05-15 2031
执行程序如下： from wsgiref.util import FileWrapper from django.http.response import HttpResponse wrapper= FileWrapper(open(file_path)) content_type = 'application/octet-stream' response = HttpResponse(wrapper, content_type) 会有下边的报错： Traceback (most rece.
deepspeed出现UnicodeDecodeError:‘utf-8‘ codec can‘t decode byte 0x89 in position 1: invalid start解决方案
weixin_43178406的博客
04-27 6万+
 本文主要介绍了deepspeed出现UnicodeDecodeError:‘utf-8’ codec can’t decode byte 0x89 in position 1: invalid start byte解决方案，希望能对使用deepspeed的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte
u013093426的博客
02-21 2万+
报错内容：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 环境：Ubuntu16.04 + pycharm 2018.3 解决方法：open文件时使用‘rb’方式 问题分析：数据文件在保存时以二进制形式保存，读取时应以二进制形式读取。原因看似简单，但在写行数较...
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
zhang_cl_cn的博客
07-03 4万+
**由于标题有字符限制没有办法将主题说的更明白，就将错误信息贴了上去，望谅解** 场景：使用Python进行斗鱼直播页面的爬取，爬取的url：https://www.douyu.com/ 当使用str(爬取的html字节码,encoding='utf-8')进行一个编码转换的时候报UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in...
python问题：UnicodeDecodeError: 'utf-8' codec can't decode byte in position : invalid start byte
weixin_38648232的博客
12-15 2万+
完成机器学习作业时，读取西瓜数据集的.csv文件，发现出现以上错误：UnicodeDecodeError: ‘utf-8’ codec can’t decode byte in position : invalid start byte 看过很多大佬的解决方案都不能搞定，其实问题就是在存在无法进行转换的二进制数据。追其根源，是因为编码方式。 大家只需要修改文件编码方式为UTF-8即可。 步骤：右键...
解决python读取pkl文件报错UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0
呆萌的代Ma
06-24 2205
完整报错是：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 解决方法 读取时open函数添加'rb'参数，如： import pickle dict_data = pickle.load(open(pkl_file,'rb')) 问题解析 固定写法哈~ ...
Python 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
卡尔特斯
11-13 677
案例一： ```py 使用 urllib import urllib.request 使用 json import json 定义 header headers = { # 'Accept': '/', # 因为有 Accept-Encoding 这行会报错：'utf-8' codec can't decode byte 0x8b in position 1: invalid ...
‘utf-8‘ codec can‘t decode byte 0x80 in position 64: invalid start byte
xiejunna的博客
08-26 1万+
问题描述 python读取文件时，抛异常：'utf-8' codec can't decode byte 0x80 in position 64: invalid start byte 解决办法 读取文件时，以二进制文件读取 # 正确 open(file=file_full_name, mode='rb') # 抛异常 open(file=file_full_name, mode='r') mode 参数源码释义： """ mode是一个可选字符串，用于指定文件的存储模式打开了。它默认为“r”，这意味着可
设置Accept-Encoding为gzip,deflate，返回的网页是乱码
mycar001的博客
10-30 4万+
用C#写代码去获取网页内容。 其中request的header中，设置Accept-Encoding为gzip,deflate： req = (HttpWebRequest)WebRequest.Create(gSkydriveUrl); req.Headers.Add("Accept-Encoding", "gzip,deflate"); 结果始终返回是乱码：
UnicodeDecodeError: utf-8 codec can t decode byte 0x8f in position 18: invalid start byte
02-23
UnicodeDecodeError是Python中的一个异常，表示在解码Unicode字符串时发生了错误。具体地说，"utf-8 codec can't decode byte 0x8f in position 18: invalid start byte"这个错误表示在使用UTF-8编解码器解码字节序列时，遇到了无效的起始字节0x8f。 UTF-8是一种变长编码方式，它使用1到4个字节来表示一个Unicode字符。在UTF-8编码中，每个字节的最高位用于标识该字节是否为一个字符的起始字节，如果一个字节的最高位为0，则表示该字节为一个字符的起始字节；如果最高位为1，则表示该字节为一个字符的后续字节。 在你提供的错误信息中，字节序列中的第18个字节0x8f被认为是无效的起始字节，因此无法正确解码。这可能是由于以下原因导致的： 1. 字节序列中包含了非UTF-8编码的字节。 2. 字节序列中的某些字节丢失或损坏。 3. 字符串本身不是以UTF-8编码保存的。 要解决这个问题，你可以尝试以下几种方法： 1. 确保输入的字节序列是以UTF-8编码保存的，并且没有丢失或损坏的字节。 2. 如果你知道输入的编码方式，可以尝试使用相应的编码器进行解码。 3. 如果你不确定输入的编码方式，可以尝试使用Python的chardet库来自动检测编码方式。 4. 如果你无法修复输入的字节序列，可以考虑使用错误处理机制来处理解码错误，例如忽略错误的字节或替换为特定的占位符。 希望以上信息对你有帮助！如果你还有其他问题，请随时提问。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值