大文件操作及处理(超过500M)

一、读取大文件

不要一行行读取(太慢),先将文件内容全部读入内存(动态分配的),再在内存的基础上操作。

ftell() 文件操作:偏移到文件末尾

或者一部分比如4MB,每次分批次读取到内存,可能要判断最后是否换行。

问题:

可能读入超过几百MB,程序报错。

原因可能是机器连续的物理内存不足。

二、三维数组(大内存)动态分配出错

使用连续的二维数组指针。连续二维+一个数组内存。

int* (*data)[SIZE2][SIZE3] = new int*[SIZE1][SIZE2][SIZE3]; // 申请三维数组方法
int *p = data[0][0][0];// 从头,方便写

int* (*data)[4] = new int*[3][4]; // 申请非连续三维数组方法 int[3][4][5]
data[i][j][k] = content; // 写数据


或者可以用链表的形式来做,就避免了连续大内存分配出错的情况。

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
当Access数据库超过10MB时,可能会导致一些问题,如性能下降,运行速度变慢,甚至可能导致数据库文件损坏。为了解决这个问题,以下是一些可能的解决方案: 1. 数据库压缩:在Access中,可以使用“压缩和修复数据库”工具来压缩数据库文件。这将删除不需要的空间并提高数据库性能。 2. 数据库拆分:如果数据库中包含多个表或查询过于复杂,可以考虑将数据库进行拆分。可以将数据分散到不同的数据库文件中,并使用链接关系进行关联。这样可以减少单个数据库文件的大小,并提高查询和数据访问的效率。 3. 删除不必要的数据:检查数据库,删除不再需要的数据记录、表格或查询,以减小数据库的大小。这可以通过删除旧的、过时的或不再使用的数据来实现。 4. 数据库优化:使用索引、关系和查询优化等技术来提高数据库的性能。这可以通过对数据库表格和查询进行适当的设计和调整来实现。 5. 数据库升级:如果数据库还是过于庞大,可以考虑将数据库迁移到更强大的数据库管理系统,如SQL Server或MySQL。这些数据库系统可以处理更大的数据集,并提供更好的性能和可伸缩性。 无论采取哪种解决方案,建议在操作数据库之前进行备份,以防止数据丢失。另外,定期进行数据库维护和优化也很重要,以保持数据库的良好性能。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值