pandas划分训练集验证集

目录

pandas划分训练集验证集，一种方法3ms，

pandas 报警告：A value is trying to be set on a copy of a slice from a DataFrame

基于采样的方法研究，不能保存完整的数据

快速提升效率的6个pandas使用小技巧

1. 从剪切板中创建DataFrame

2.  通过数据类型选择columns

3. 将strings改为numbers

4. 检测并处理缺失值

5. 对连续数据进行离散化处理

6. 从多个文件中构建一个DataFrame

---

pandas划分训练集验证集，一种方法3ms，

5000图片，耗时3ms。

        start=time.time()
        data_col = [random.randint(0, 1) for _ in range(self.df_label.shape[0])]
        self.df_label[self.split_col]=data_col

        print('concat time', time.time() - start)
        self.label_file.to_csv(self.label_file, mode='w', index=False)