python工具方法 10 h5py批量写入文件、读取文件，支持任意维度的数据

最新推荐文章于 2024-09-13 12:45:19 发布

万里鹏程转瞬至

最新推荐文章于 2024-09-13 12:45:19 发布

阅读量1.4w

点赞数 5

分类专栏： python工具方法文章标签： python h5py 批量读写数据

本文链接：https://blog.csdn.net/a486259/article/details/86154857

版权

python工具方法专栏收录该内容

50 篇文章 125 订阅 ¥49.90 ¥99.00

订阅专栏

本文介绍了如何使用Python的h5py库进行批量读写h5文件，支持任意维度的数据操作。首先讲解了创建h5文件及引入相关库，接着详细阐述了批量写入数据的步骤和注意事项，特别是数据需要转换为numpy数组。随后，讨论了如何批量读取文件内容。最后，展示了完整的代码示例。

摘要由CSDN通过智能技术生成

1、创建引入库并创建h5文件

import h5py
import numpy as np

file_name='data.h5'
h5f=h5py.File(file_name)

2、批量写入数据的方法（支持任意维度的数据）一直追加数据到h5文件中

def save_h5(h5f,data,target):
    shape_list=list(data.shape)
    if not h5f.__contains__(target):
        shape_list[0]=None #设置数组的第一个维度是0
        dataset = h5f.create_dataset(target, data=data,maxshape=tuple(shape_list), chunks=True)
        return
    else:
        dataset = h5f[target]
    len_old=dataset.shape[0]
    len_new=len_old+data.shape[0]
    shape_list[0]=len_new 
    dataset.resize(tuple(shape_list)) #修改数组的第一个维度
    dataset[len_old:len_new] = data  #存入新的文件

3、调用批量写入的方法（注意da

了解本专栏