这篇博客记录本人实验过程中的一些细节,既是对过往总结,也希望能够对别人有所帮助
一、存储文件的重要性
为什么要在实验过程中存储文件,因为有些算法的内容存在一些重复计算的步骤,这些步骤往往消耗很大一部分时间,在有大量参数的情况时,需要在多次不同参数的情况下重复试验,因此可以考虑将一些不涉及参数运算的部分结果存入文件中,程序运行到需要该结果的时候可以直接调用,不再浪费时间。
可以参考一下本人这篇博客里思路
PMU算法Python实现
二、存储文件的方式
python里有多种格式数据和文件,目前机器学习里常用的文件格式有csv(xls、xlsx)、json、html、txt、mat、npy(男盆友)等,数据格式有dataFrame、array、mat、python基础数据格式等。需要注意的是,不同格式的文件存储着不同数据类型的数据。
npy文件(npy文件的优点在于可以存储字典格式文件,不需要额外处理):
import numpy as np
import random
train_data = np.random.rand(10)
random.shuffle(train_data)
train_data = train_data.reshape(2, 5)
train_target = np.array([</