field larger than field limit (131072) 和 ParserError: Expected 337 fields in line 4, saw 1491

Error: field larger than field limit (131072)

当在文本文件中出现非常大的字段时候，就可能出现这个问题：

第一种解决方式：

import csv
csv.field_size_limit(500 * 1024 * 1024)

第二种解决方式：

import sys
import csv
 
csv.field_size_limit(sys.maxsize)

ParserError: Expected 337 fields in line 4, saw 1491

一种解决方式是：
在读取文件时加入error_bad_lines = False，但是运行程序的时候会有提示信息，要关掉提示信息，直接再加入warn_bad_lines=False即可。
形如：

data = pd.read_csv('test.csv', error_bad_lines = False, warn_bad_lines=False)

事实上，至此我的问题依然没有得到解决。。。

在读取文件时还可以加入sep='\t'或者delimiter='\t'

参考链接：https://www.cnblogs.com/lukes1973/p/9044842.html

如果以上问题都解决不了你的问题，那么，太惨了，我们真的只是电脑内存不够用。。。。。