python读取csv文件时报错：Skipping line 150: expected 42 fields, saw 51

最新推荐文章于 2023-12-05 17:28:18 发布

fanfan_mua

最新推荐文章于 2023-12-05 17:28:18 发布

阅读量494

点赞数

文章标签： python 开发语言

本文链接：https://blog.csdn.net/fanfan_mua/article/details/127630738

版权

搞了好久这个错误。总是读取出来少两行，现在记录一下

python读取csv文件


```python
data_path = r'E:/jgzsk/data_EI/'+file_name
data = pd.read_csv(data_path,delimiter="\t",encoding='UTF8',在这里插入代码片)
 print(data)

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

fanfan_mua

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

pandas 基础

老胡的笔记

04-16

1164

pandas有两个主要的数据结构DataFrame和Series。DataFrame是一个类似数据库表的二维结构，Series是一个一维结构。

python读取csv失败_python读取csv文件遇到的问题

weixin_39846553的博客

12-07

1895

CSV文件如下：报错①：取csv文件语句：df = pd.read_csv(file_path ,skip_blank_lines=True,header=None)报错：b'Skipping line 7: expected 2 fields, saw 3刚开始没有注意这个错误，只是想要读取某一行的时候一直显示读不到。后来看了这个报错，才发现只能读取前两列。有的答案是让你忽略掉读不到的行。但是...

参与评论您还未登录，请先登录后发表或查看评论

关于Python3.7读取csv文件出现‘Skipping line 7: expected 2 fields, saw 3’报错问题的解决方案

weixin_44139849的博客

09-23

9708

问题背景 python支持的read_csv非常方便易用，但在一次把csv转为xlsx的简单应用过程中，发现有多列诸如**‘Skipping line 7: expected 2 fields, saw 3’**报错，检查具体文件，发现报错的行都缺失了。需要调查解决。问题定位 1.常规思路搜报错出现很多相似问题，但要么没有解决，要么可读性差。最终是从下面作者找到的方案： python读取csv文件遇到的问题我一开始甚至以为和我的不是一个问题而错过浪费了至少3小时。。。直到后来测试文件的行数可以被检查，

pandas read_csv报错Skipping line 749030: expected 30 fields, saw 31

weixin_42599429的博客

05-14

2030

最近处理个需求需要在hive导出文件后用pandas进行处理生成个新的csv。然后在read_csv时，遇到了这个跳过这以行的提醒，文件100行可能读进dataframe中可能只剩下了8行，这是因为在csv中的分隔符是',',在hive字段中如果有英文逗号就会在pandas转成多列就不会读进dataframe 解决方法：在hive -e进行重定向之前，将hive的对应字段进行一步清洗工作，比如translate(name,",","") as name,这样在hive -e导出的csv读取...

python读取csv

铁侠的博客

04-29

418

Python读取文件遇到的坑 Python可读取多种格式的文件，在读取和存储、处理数据时常用pandas库： -pandas常见的读取数据方法和写入方法有以下几种： read_csv read_excel read_hdf read_sql read_json … to_csv to_excel to_hdf to_json … 新建csv文件不能直接改后缀名，应该将E...

python读取表数据

qq_36151472的博客

09-29

1304

在用pandas读csv文件时报错： ParserError: Error tokenizing data. C error: Expected 52 fields in line 349255, saw 54. 打开文件一看，349255行52列数据中含有逗号因为csv文件本身是逗号分割，如果数据中含有逗号，在读的时候pandas不知该如何处理。解决方法有两种，第一个就是把数据处理，把数据中的逗号删去或者换成其他字符代替；第二种就是用read_csv方法中设置error_bad_lines=False

b'Skipping line 23: expected 1 fields, saw 2\n'

07-08

这个错误通常表示在读取文件的过程中，程序预期每行只有一个字段，但实际上有一行包含了两个或更多字段。根据错误消息中的信息，它似乎是在第23行遇到了这个问题。请检查您的文件，确保第23行的数据格式正确，并且...

python 加速csv读取速度_csv读慢python的速度

weixin_31367439的博客

02-03

1940

我想找出CSV阅读速度慢的原因。在我尝试了多种方法，我有8GB的csv文件，处理后它是大约6GB的10列。在我想的是，用一个线程读取文件，然后在另一个线程中处理它，所以我不使用任何bandwith。基本上和我在另一个堆栈溢出线程中找到的差不多。在速度现在是1112秒左右，只读取文件！它相当于大约7MB/s。我可以通过SQL将这个驱动器的读取速度提高到380MB/s左右，所以肯定存在一些瓶颈或其他问...

pandas 数据读取（csv/txt/excel/json）

wenlulan的博客

09-13

1013

pandas 数据读取（csv/txt/excel/json）一、pd.read_csv(txt) 常用参数这里只介绍一下比较常用的参数，需要更多了解的可以查pandas官方文档 ① filepath_or_buffer：需要读取的文件路径，输入路径时可以在可以在路径前加 r 避免转义，路径最好时纯英文 import pandas as pd df1=pd.read_csv(r'C:/Users/37957/Desktop/demo1.txt') df1

python 3.7 caffe 解压到 D:\Anaconda3\envs\caffe\Lib

05-25

标题中的“python 3.7 caffe”指的是使用Python 3.7版本的Caffe库，一个流行的深度学习框架。Caffe是由伯克利视觉与学习中心（BVLC）开发的，以其高效、灵活和易用性著称。它主要用于卷积神经网络（CNN）的训练和...

csv文件python读取报错编码错误问题终极完美解决

xianzhetime的博客

03-13

9002

项目场景：用jupyter notebook连接服务器进行csv文件读取，csv文件有2.56g，里面记录着很多信息，猜测此前使用excel记录的，可以用dataframe打开分析。此解决方法对我有用，你也可以试试！问题描述首先就是编码错误提示： import numpy as np import pandas as pd import csv path1=r'数据2.csv' q1=pd.read_csv(path1) q1 UnicodeDecodeError: 'utf-8' co

ParserError: Expected 14 fields in line Y saw X和Input contains NaN, infinity or a value too large fo

younger_to_older的博客

08-12

470

File "pandas\_libs\parsers.pyx", line 876, in pandas._libs.parsers.TextReader.read File "pandas\_libs\parsers.pyx", line 891, in pandas._libs.parsers.TextReader._read_low_memory File "pandas\_libs...

Pandas报错 ParserError：Error tokenizing data.C error:Expected 12 fields in line 407,saw 13.

给我一点温度

07-28

4424

使用pandas.read_csv(filePath) 方法来读取csv文件时，出现如下错误：ParserError：Error tokenizing data.C error:Expected 12 fields in line 407,saw 13. 产生原因：在读取csv文件的第407行数据时，输入的应该是12个字段，但实际却出现了13个字段。解决办法：第一种方法：把该行多出的字段删除。（但由于文件很特殊，行数以万来记，因此一个一个的找出原因再删掉不现实）第二种方法：通过在read_cs

解决pandas.errors.ParserError: Error tokenizing data. C error: Expected 1 fields in line

最新发布

toby001111的博客

12-05

4077

解决pandas.errors.ParserError: Error tokenizing data. C error: Expected 1 fields in line

【Pandas处理CSV】Error tokenizing data. C error: Expected 1 fields in line XX, saw XX

数据分析成长之路

06-19

3771

报错原因：CSV的分隔符设置异常。解决： pd.read_csv(filepath, delimiter="\t") # 或 pd.read_csv(filepath, sep="\t")

解决weka数据挖掘打开csv文件报read 9,expected 1.read token[eol] ,line 3错误原因

weixin_34357962的博客

01-05

1271

这问题我查了很多资料，意思是csv中读到9个属性（特征/维度）值，但是只读到一个，第三行有问题。然后还有各种讲解数据中格式空格符的问题之类的；其实按照设置@attribute的属性方法来讲根本没什么错误。根据方法改了许久，没有效果，而且搞笑的是，我换了行的位置用空行代替第3行还报同样错误。最后解决方案，直接把该此文件转为.arff后缀文...

读取csv(excel类相关文件)常见bug，及解决办法统计

luluzsa的博客

05-29

2729

bug1: UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0xb1 in position 5: illegal multibyte sequence 解决办法1：上面报错的意思就是，默认以gbk的方式读取数据，但是文本数据是utf-8类型的，这是需要用到另一个参数encoding，也就是把它编码成与文本一样类型的格式，下面的代码encoding="utf-8"就是要修改的地方，如果不写编码格式，默认是encoding="gbk"的 #open(“.

解决ParserError: Error tokenizing data. C error: Expected 10 fields in line 13, saw 12

菜鸟IT女

06-21

2811

报错来源代码如下： import pandas as pd pd.read_csv("data1.txt") 报错如下：原因及解决方式这个报错信息的大概含义就是，期待的是10个字段，但是在第13行，出现了12个字段。而我们需要的是所有的数据，所以就是用python原生的读取文件方式——上下文管理器，并且构造数据为：二维数组，其中每个元素就是单独的一行。代码如下： # 定义列表data data=[] # 打开data1.txt with open('data1.txt', 'r',enc

解决pandas读取csv、tsv文件出现错误《ParserError: Error tokenizing data. C error: Expected 1 fields in line...》