最近在处理切割后的文件时发现了这么个问题:如果两个csv文件都含有一类数据时,第二个文件的这个数据再导出时会覆盖掉第一个文件已经导出的数据,导致数据不完整。于是在网上找了些语句,可以把数据插入到已经创建保存的csv文件数据的后面,自己做个笔记留存。
部分摘自文章《python中的数据写入与添加数据写入文件(to_csv)》,文章来源:https://www.cnblogs.com/beyondChan/p/10776345.html,作者: beyondChan
这是我不能把新数据插在已有文件后面的代码
import pandas as pd
import os
import glob
j = 0
for filename in glob.glob(r'D:/接收的文件/year_02/*.csv'):
# 读取文件数据
df = pd.read_csv(filename, sep=',', engine='python')
# 列csv文件中所有列
df.columns = ['year', 'date', 'statefips', 'countyfips', 'ctfips', 'latitude', 'longitude', 'DS_PM_pred', 'DS_PM_stdd']
# grouped = df.groupby('date')
# delete duplicated data
ind_frame = df.drop_duplicates(subset=['date'