UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 1: invalid start byte

最新推荐文章于 2024-09-13 21:26:23 发布
最新推荐文章于 2024-09-13 21:26:23 发布
阅读量1.9k 收藏 2
点赞数
分类专栏： pandas Python 文章标签： python bug
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/spicrab/article/details/108452581
版权
在尝试使用pandas读取csv文件时遇到'UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 1: invalid start byte'错误。尽管文件看起来正常，但问题可能与文件编码有关。参考StackOverflow上的建议，通过使用不同的编码方式（如答主MSalty推荐的）成功解决了问题。
摘要由CSDN通过智能技术生成

Error

用pandas读取一个csv文件时出现该错误：

import pandas as pd
df = pd.read_csv('filename', index_col=0)

error message为UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 1: invalid start byte.

Solution

虽然在检查了该csv文件后未发现第一行文本有问题，但这个错误一定与utf-8无法解码文本有关。在这个StackOverflow post上查到一个解决方法是用别的enc

最低0.47元/天 解锁文章
Spicrab
关注
专栏目录
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xc1 in position 41694: invalid start byte解决方案
weixin_43178406的博客
03-31 1万+
本文主要介绍了UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xc1 in position 41694: invalid start byte解决方案，希望能对学习Python的同学有所帮助。 文章目录 1. 问题描述 2. 解决方案
爬虫编码UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xb1 in position 78: invalid start byte解决方案
热门推荐
weixin_43178406的博客
05-10 8万+
本文主要介绍了爬虫编码UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xb1 in position 78: invalid start byte解决方案，希望能对学习python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Python3 解决 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
BRAVE MAN的博客
11-23 6750
一、问题 　　request.Request(url，headers=headerDict))的时候出现异常信息：'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte 二、解决方案 　　http头中headerDict参数："Accept-Encoding": "gzip, deflate", 　　代...
Python解决UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xbb in position 0: invalid start byte
最新发布
qq_34815075的博客
09-13 479
1、读取文件报错，UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xbb in position 0: invalid start byte。分析：报错原因，文件并非utf-8格式。解决办法多种：方法一：打开文件，在wps或者word另存为utf-8格式在读取。方法二：获取该文件的编码。
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position
CHENYAoo的博客
10-10 1万+
用python写的代码，大致是以下内容出错 import os # 使用os获取mypath文件夹内的文件 dir = os.listdir("mypath") # dir=[file1,file2,file3] for file in dir: with open(file,"rt") as f # “rt”表示以文本模式读取文件，默认是utf-8编码 # do...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0: invalid start byte
martinkeith的博客
08-05 1966
报错内容：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 环境：Ubuntu16.04 + pycharm 2018.3 解决方法：open文件时使用‘rb’方式 问题分析：数据文件在保存时以二进制形式保存，读取时应以二进制形式读取。原因看似简单，但在写行数较多的程序时经常会忽略，导致运行过程中报错。 ...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0: invalid start byte解决方案
qq_41175546的博客
11-22 2048
我的出错定位在这里 pickle模块反序列化模型文件时出错 dd = pickle.load(open(fname_or_dict)) 查了很多博客，utf-8，iso-8859-1，gbk，latin1都试过了，还是报错 然后试了这个方法，将这行改成 dd = pickle.load(open(fname_or_dict,"rb"),encoding='iso-8859-1') 然后就成功了，特此记录。 ...
UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 109130: invalid start byte
Eve_Shieh的博客
11-11 1685
成功解决‘UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 109130: invalid start byte’
新手问题解决：UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x84 in position 35: invalid start byte
2301_77474473的博客
02-25 1万+
作为一名python新手，运行程序真是如履薄冰，各种问题搞的头大。我只希望程序能够出图出误差结果，整好论文。运行程序一直出现UnicodeDecodeError: 'utf-8' codec can't decode byte 0x84 in position 35: invalid start byte意思是UnicodeDecodeError：“utf-8”编解码器无法解码位置 35 中的字节0x84：起始字节无效。
UnicodeDecodeError: utf-8 codec cant decode byte 0x8b in position 1: invalid start byte
qq_36380748的博客
05-15 2085
执行程序如下： from wsgiref.util import FileWrapper from django.http.response import HttpResponse wrapper= FileWrapper(open(file_path)) content_type = 'application/octet-stream' response = HttpResponse(wrapper, content_type) 会有下边的报错： Traceback (most rece.
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte
u013093426的博客
02-21 2万+
报错内容：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 环境：Ubuntu16.04 + pycharm 2018.3 解决方法：open文件时使用‘rb’方式 问题分析：数据文件在保存时以二进制形式保存，读取时应以二进制形式读取。原因看似简单，但在写行数较...
UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
zhang_cl_cn的博客
07-03 4万+
**由于标题有字符限制没有办法将主题说的更明白，就将错误信息贴了上去，望谅解** 场景：使用Python进行斗鱼直播页面的爬取，爬取的url：https://www.douyu.com/ 当使用str(爬取的html字节码,encoding='utf-8')进行一个编码转换的时候报UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in...
python问题：UnicodeDecodeError: 'utf-8' codec can't decode byte in position : invalid start byte
weixin_38648232的博客
12-15 2万+
完成机器学习作业时，读取西瓜数据集的.csv文件，发现出现以上错误：UnicodeDecodeError: ‘utf-8’ codec can’t decode byte in position : invalid start byte 看过很多大佬的解决方案都不能搞定，其实问题就是在存在无法进行转换的二进制数据。追其根源，是因为编码方式。 大家只需要修改文件编码方式为UTF-8即可。 步骤：右键...
解决python读取pkl文件报错UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x80 in position 0
呆萌的代Ma
06-24 2239
完整报错是：UnicodeDecodeError: 'utf-8' codec can't decode byte 0x80 in position 0: invalid start byte 解决方法 读取时open函数添加'rb'参数，如： import pickle dict_data = pickle.load(open(pkl_file,'rb')) 问题解析 固定写法哈~ ...
Python 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte
卡尔特斯
11-13 777
案例一： ```py 使用 urllib import urllib.request 使用 json import json 定义 header headers = { # 'Accept': '/', # 因为有 Accept-Encoding 这行会报错：'utf-8' codec can't decode byte 0x8b in position 1: invalid ...
‘utf-8‘ codec can‘t decode byte 0x80 in position 64: invalid start byte
xiejunna的博客
08-26 1万+
问题描述 python读取文件时，抛异常：'utf-8' codec can't decode byte 0x80 in position 64: invalid start byte 解决办法 读取文件时，以二进制文件读取 # 正确 open(file=file_full_name, mode='rb') # 抛异常 open(file=file_full_name, mode='r') mode 参数源码释义： """ mode是一个可选字符串，用于指定文件的存储模式打开了。它默认为“r”，这意味着可
设置Accept-Encoding为gzip,deflate，返回的网页是乱码
mycar001的博客
10-30 4万+
用C#写代码去获取网页内容。 其中request的header中，设置Accept-Encoding为gzip,deflate： req = (HttpWebRequest)WebRequest.Create(gSkydriveUrl); req.Headers.Add("Accept-Encoding", "gzip,deflate"); 结果始终返回是乱码：
UnicodeDecodeError: 'utf8' codec can't decode byte 0x80 in position 3131: invalid start byte
MichaelAn的博客
02-13 1964
UnicodeDecodeError: 'utf8' codec can't decode byte 0x80 in position 3131: invalid start byte 2021-08-30 一、产生问题的原因 在我使用python读取文本列表后，然后再读取每个文件的内容产生了上面的错误， 如果你是在...
UnicodeDecodeError: utf-8 codec can t decode byte 0x8f in position 18: invalid start byte
02-23
UnicodeDecodeError是Python中的一个异常，表示在解码Unicode字符串时发生了错误。具体地说，"utf-8 codec can't decode byte 0x8f in position 18: invalid start byte"这个错误表示在使用UTF-8编解码器解码字节序列时，遇到了无效的起始字节0x8f。 UTF-8是一种变长编码方式，它使用1到4个字节来表示一个Unicode字符。在UTF-8编码中，每个字节的最高位用于标识该字节是否为一个字符的起始字节，如果一个字节的最高位为0，则表示该字节为一个字符的起始字节；如果最高位为1，则表示该字节为一个字符的后续字节。 在你提供的错误信息中，字节序列中的第18个字节0x8f被认为是无效的起始字节，因此无法正确解码。这可能是由于以下原因导致的： 1. 字节序列中包含了非UTF-8编码的字节。 2. 字节序列中的某些字节丢失或损坏。 3. 字符串本身不是以UTF-8编码保存的。 要解决这个问题，你可以尝试以下几种方法： 1. 确保输入的字节序列是以UTF-8编码保存的，并且没有丢失或损坏的字节。 2. 如果你知道输入的编码方式，可以尝试使用相应的编码器进行解码。 3. 如果你不确定输入的编码方式，可以尝试使用Python的chardet库来自动检测编码方式。 4. 如果你无法修复输入的字节序列，可以考虑使用错误处理机制来处理解码错误，例如忽略错误的字节或替换为特定的占位符。 希望以上信息对你有帮助！如果你还有其他问题，请随时提问。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值