Python 大文件拆分,分类,存储
Python 大文件拆分,分类,存储一、对可迭代对象简易理解二、进行大文件的拆分,存储
参考代码 python使用chunk进行大文件的读写,代码如下:
# python使用chunk进行大文件的读写
reader = pd.read_csv('test.csv', iterator=True,low_memory=False)
loop = True
chunkSize = 100000
chunks = []
while loop:
try:
chunk = reader.get
原创
2021-01-06 15:14:31 ·
431 阅读 ·
0 评论