去重的两种方法:duplicated()和drop_duplicates()
DataFrame.drop_duplicates(subset=None, keep='first', inplace=False)
参数:
subset是用来指定特定的列,默认为所有列
keep
当keep='first'时,就是保留第一次出现的重复行,其余删除
当keep='last'时,就是保留最后一次出现的重复行,其余删除
当keep=False时,就是删除所有重复行
inplace是指是否直接在原数据上进行修改,默认为否
现在需要删除前面5个epoch的结果,保留后面5个的数据