![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据处理记录
多肉葡萄0511杯
这个作者很懒,什么都没留下…
展开
-
【数据处理】三维数据堆叠成四维并分割成训练集和测试集(为模型训练做准备)
def load_data(file_path): data = np.load(file_path) print(data.shape) return datafile_path = '\series.npy'def split(data, train_cnt, input_num,output_num): # 计算三维数据的第一个维度的长度,确定如何分割 data_len = len(data[0]) set_len = input_原创 2021-11-02 16:40:21 · 484 阅读 · 1 评论 -
【数据处理】表格合并与去重
多表格合并与去重import os import pandas as pdimport globdef hebing(csv_list, outputfile): for inputfile in csv_list: f = open(inputfile) data = pd.read_csv(f) data.to_csv(outputfile, mode='a', index=False) print('完成合并')de原创 2021-11-02 16:23:04 · 339 阅读 · 0 评论 -
【数据处理】把记录了网格点位的DataFrame还原成网格形式(增加了数据归一化)
DataFrame存储的网格数据转换成数组或Tensor 存储(xr.Dataset 用法学习)NOAA 下载.csv 模型数据 转换成 Tensor 处理NOAA下载数据.csv 格式数据转换成 一般气象数据格式或arrayNOAA 下载.csv 模型数据 转换成 Tensor 处理(1) 从NOAA 下载需要的数据(2) .csv数据格式转换(3) 保存成.npy或.nc 数据NOAA下载数据通常可以通过以下链接(NOAA)下载需要的气象数据/海洋数据等NWW3 模型数据台风天海洋数据原创 2021-11-02 16:19:06 · 359 阅读 · 0 评论