我正在尝试将8GB二进制文件读入内存并对其进行处理。 文件包含序列HEADER,DATA,HEADER,DATA,....我想将其移到(在内存中)以:DATA,DATA,DATA,...加载巨大(8GB)的二进制文件,并将其转移到内存中C++ Linux 64bit
它是灰度16位图像数据。
我的问题是,我只能使用顺序uproach(代码以下),因为.read()函数只适用于32位寄存器,并且指针下方只允许我有32位最大数量的无符号短裤。
有什么我失踪?这是在64位的Linux与64GB内存,所以这是很多。 (并且它确实需要一次全部存储在内存中) 然后我可以获得更多的指针,然后[2^32]?如果阅读是我唯一的选择,我可以顺序读入它们。
编辑:我更新了我的代码,它不会抱怨任何事情,只有memove给我分段错误(对于j> = 448)。任何想法为什么?
示例代码:
const unsigned int HEADERSIZE=384;
ifstream fs;
fs.open("./myfile.bin", ios::in | ios::binary);
unsigned short *tmp0 = new unsigned short [256*256*256*256+HEADERSIZE/2*256*256];
unsigned short *tmpNoHead = new unsigned short [256*256*256*256];
fs.read((char*)tmp0, 2*256*256*256*256+HEADERSIZE*256*256);
//endian swap
unsigned char*c0 = (unsigned char*)tmp0;
for (long i = 0; i < HEADERSIZE*256*256+256*256*256*256*2; i += 2)
swap(c0[i], c0[i + 1]);
//memmove or memcpy seg fault if j>=448
for (int j = 0; j<256*256;j++) memmove(tmpNoHead+j*256*256,c0+HEADERSIZE*(j+1)+j*256*256*2,256*256*2);
fs.close();
return 0;
+0
在64位Linux上,int应该是64位。 –