npy文件如何追加数据?

文章讲述了如何在NumPy的.npy文件中安全地追加数据,避免破坏文件结构。推荐步骤包括加载现有数据、合并新数据(保持维度兼容)、使用numpy.concatenate或对应函数按行或列追加,并将结果保存到新的.npy文件中。非标准操作不建议直接修改文件头部。
摘要由CSDN通过智能技术生成

.npy 文件是 NumPy 库用于存储数组数据的二进制格式,它包含一个描述数组结构的头部信息和实际的数据部分。直接追加数据到现有的 .npy 文件并不像文本文件那样直接,因为需要手动修改文件头部以反映新增数据后的数组尺寸,并且要确保数据正确地附加到现有数据之后。

图片来源网络,侵删

不过,通常推荐的做法不是直接追加到现有 .npy 文件,而是采取以下步骤:

  1. 加载现有数据:首先使用 numpy.load() 函数加载现有的 .npy 文件中的数组数据。
  2. 合并数据:将新数据(同样需要是 NumPy 数组)与加载的数组进行合并。如果你希望按行追加(例如,两个一维数组),可以使用 numpy.concatenate() 或 numpy.vstack() 函数;如果是按列追加(对于二维数组),可以使用 numpy.hstack() 或调整后使用 numpy.concatenate()
  3. 保存新数据:将合并后的新数组保存到一个新的 .npy 文件中,使用 numpy.save() 或 numpy.savez() 函数。

图片来源网络,侵删

这样做的原因是,.npy 文件格式设计时并未考虑简单的追加操作,直接修改文件可能破坏其内部结构。下面是示例代码:

#python

import numpy as np

# 加载现有数据
existing_data = np.load('existing_data.npy')

# 新数据,确保维度与现有数据兼容
new_data = np.array([...])  # 这里是你的新数据

# 按行追加(假设都是二维数组,且列数相同)
combined_data = np.vstack((existing_data, new_data))

# 保存到新文件
np.save('new_combined_data.npy', combined_data)

如果你确实需要保留原始文件名,并且不想每次追加都创建新文件,理论上可以通过读取并解析 .npy 文件头,手动修改形状信息,然后重新写入数据和更新的头部信息来实现追加,但这涉及到复杂的文件操作和对 .npy 格式的深入了解,通常不建议这样做,除非有特别的需求。

  • 3
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九哥BIMer

予人玫瑰,手有余香

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值