C++ 使用文件映射

最新推荐文章于 2024-08-01 02:59:13 发布
最新推荐文章于 2024-08-01 02:59:13 发布
阅读量2.7k 收藏
点赞数
分类专栏： C++
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhizhuode/article/details/51489540
版权
本文介绍了在C++中如何使用文件映射处理大文件，通过CreateFileA、CreateFileMappingA和MapViewOfFile等函数实现。在完成操作后，必须调用UnmapViewOfFile和CloseHandle等函数释放资源。建议使用C++11的shared_ptr定制删除器以防止资源泄露。在写入文件映射时，若文件大小未知，应根据实际写入大小调整映射，然后通过memmove函数迁移数据。
摘要由CSDN通过智能技术生成

 针对大文件来说一般是以内存映射文件的方式来进行的。具体的各种原理什么的可以参考windows核心编程。这里主要说下怎么用的。

  一般情况下使用CreateFileA,CreateFileMappingA,MapViewOfFile就可以了。

 

hfile = CreateFileA("temp.txt", GENERIC_WRITE | GENERIC_READ, FILE_SHARE_READ, nullptr,
 CREATE_ALWAYS, FILE_FLAG_SEQUENTIAL_SCAN, nullptr);
 if (hfile == INVALID_HANDLE_VALUE)
 return;
 SECURITY_ATTRIBUTES sa;
 SECURITY_DESCRIPTOR sd;
 InitializeSecurityDescriptor(&sd, SECURITY_DESCRIPTOR_REVISION);
 SetSecurityDescriptorDacl(&sd, TRUE, nullptr, FALSE);
 sa.nLength = sizeof(SEC

                

        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  zhizhuode
                
              
            

            

                关注
              
            

        

        

          
      

      

            

                专栏目录
          









                



	

		

			

				
					
C++中使用内存映射文件处理大文件

				
			

			

				

					10-22
				

			

		

		

			
				
2. **CreateFileMapping**: 使用创建的文件句柄，创建一个文件映射对象。此函数定义了文件映射的保护属性、最大大小以及名称。这一步是将文件与内存空间关联的关键。  3. **MapViewOfFile**: 通过文件映射对象，将...

			
		

	



                

              
                



	

		

			

				
					
c++内存映射文件

				
			

			

				

					www_dong的博客
				

				

					07-15
					
					2843
					
				

			

		

		

			
				
4）在接收进程中打开对应的内存映射对象。1G的文件完成文件映射需要143微妙。3）映射文件到进程的虚拟地址空间。2）创建内存映射内核对象。5）回写内存映射文件。

			
		

	



                


  
              

                


	

		

			

				
					
C/C++ 文件写入读取

				
			

			

				

					cocosum
				

				

					05-18
					
					3716
					
				

			

		

		

			
				
C++ 文件基本操作
1. 文件基本写入
要想实现一个文件的基本写入需要用到下面三个函数(基本流程):




步骤
函数
说明
备注




第一步
fopen()
打开文件
fopen(“文件路径+文件名”， “模式(wb/ab/rb)”) 返回FILE* fp指针


第二步
fwrite()
写入文件
fwrite(“写入的内容”, 1, “内容的大小(字节)”, “FILE* 指针对象”);


第三步
fclose()
关闭文件
fclose(“FILE* 指针对象”); 对文件进行写入/读取之

			
		

	





	

		

			

				
					
C++ 文件映射内存读写

					
最新发布

				
			

			

				

					修也
				

				

					08-01
					
					140
					
				

			

		

		

			
				
【代码】C++ 文件映射内存读写。

			
		

	



		

			
		



	

		

			

				
					
mmap方法将文件映射到内存

				
			

			

				

					Leeboy_Wang的专栏
				

				

					08-22
					
					5983
					
				

			

		

		

			
				
注意：sys/mman.h头文件在windows下没有必须在linux下才能通过。
方法介绍：
mmap将一个文件或者其它对象映射进内存。文件被映射到多个页上，如果文件的大小不是所有页的大小之和，最后一个页不被使用的空间将会清零。
void *mmap(void *start, size_t length, int prot, int flags,int fd, off_t offset);

			
		

	





	

		

			

				
					
c++文件映射

				
			

			

				

					WuSk__的博客
				

				

					04-04
					
					257
					
				

			

		

		

			
				
【代码】c++文件映射。

			
		

	





	

		

			

				
					
file_内存映射_C++_

				
			

			

				

					09-29
				

			

		

		

			
				
- 内存对齐：确保文件映射的地址和大小都符合内存对齐要求，以避免性能损失。 - 数据一致性：在并发环境下，需要正确处理同步问题，以保证数据的一致性。  综上所述，“file_内存映射_C++_”项目利用C++的内存映射...

			
		

	





	

		

			

				
					
文件映射封装类

				
			

			

				

					04-16
				

			

		

		

			
				
总之，"文件映射封装类"是为了简化跨平台的文件映射操作而设计的，它将复杂的系统调用封装在易于使用的类中，使得开发者可以更高效、安全地利用文件映射功能。通过理解mymmapw.cpp、mymmapu.cpp、mymmapu.h和mymmapw...

			
		

	





	

		

			

				
					
C++ 可以解决64位程序调用32位库、双向信道跨进程间通信的文件映射处理类源码

				
			

			

				

					09-11
				

			

		

		

			
				
1初始化文件映射对象 2同步 3获取文件映射对象的映射视图 4释放文件映射对象的映射视图 5释放文件映射对象  源码包含了封装的功能模块类以及测试类， 全部源码都可以用VS2020编译通过，请放心使用！ 友情提示，为了...

			
		

	





	

		

			

				
					
c++ 内存映射代码

				
			

			

				

					08-18
				

			

		

		

			
				
c++ 内存映射

			
		

	





	

		

			

				
					
C++ CreateFileMapping 内存映射实现快速读取文件

				
			

			

				

					hml111666的博客
				

				

					07-08
					
					9922
					
				

			

		

		

			
				
共享内存的方式原理就是将一份物理内存映射到不同进程各自的虚拟地址空间上，这样每个进程都可以读取同一份数据，从而实现进程通信。因为是通过内存操作实现通信，因此是一种最高效的数据交换方法。本文主要讲述的使用内存映射文件的目的是访问磁盘上的数据文件。你可以不必对文件执行I / O操作，并且可以不必对文件内容进行缓存。1、CreateFileMapping// 创建一个内存映射文件的内核对象


2、MapViewOfFile // 将内存映射文件映射到进程的虚拟地址中


3、OpenFileMapping //

			
		

	





	

		

			

				
					
C++ IPC进程间的通信《C++多线程编程实战》

				
			

			

				

					qq_33373173的博客
				

				

					02-14
					
					4561
					
				

			

		

		

			
				

 临界值：程序中能被访问共享内存的部分


进程间通信示例：程序一开始就有2个进程，它们在一个普通窗口中完成绘制矩形的任务。2个进程相互通信，一个进程再画矩形时，另一个进程要等待


IPCWorker.cpp

#include <Windows.h>
#include <tchar.h> //_tcscmp() _TCHAR*

#define COMMUNI

			
		

	





	

		

			

				
					
C/C++（5）实现大数据文件的内存映射机制

				
			

			

				

					林微的博客
				

				

					09-26
					
					4271
					
				

			

		

		

			
				
摘要
本文主要讲述大量数据的文件的内存映射机制的实现。


1. 内存映射
内存映射文件，是由一个文件到一块内存的映射。Win32提供了允许应用程序把文件映射到一个进程的函数 (CreateFileMapping)。内存映射文件与虚拟内存有些类似，通过内存映射文件可以保留一个地址空间的区域，同时将物理存储器提交给此区域，内存文件映射的物理存储器来自一个已经存在于磁盘上的文件，而且在对该文

			
		

	





	

		

			

				
					
Linux C++使用TCP通信实现同一局域网下电脑客户端与工控机服务端传输文件数据（亲测可用）

				
			

			

				

					ssz__的博客
				

				

					05-07
					
					766
					
				

			

		

		

			
				
本次小项目是在上一篇博客的基础上从TCP本地通信延伸到TCP同一局域网通信 ，而这个项目的背景是工控机装在一个小车平台上，工控机运行代码控制小车的导航定位以及其他一些延伸功能，此时就需要调用一些参数。此时使用同一局域网下TCP通信就可以用电脑远程修改参数，从而更方便的对小车进行调参。

			
		

	





	

		

			

				
					
VC++中使用内存映射文件处理大文件

				
			

			

				

					DellXu的专栏
				

				

					09-24
					
					1177
					
				

			

		

		

			
				
　引言　　文件操作是应用程序最为基本的功能之一，Win32 API和MFC均提供有支持文件处理的函数和类，常用的有Win32 API的CreateFile()、WriteFile()、ReadFile()和MFC提供的CFile类等。一般来说，以上这些函数可以满足大多数场合的要求，但是对于某些特殊应用领域所需要的动辄几十GB、几百GB、乃至几TB的海量存储，再以通常的文件处理方法进行处理显然是

			
		

	





	

		

			

				
					
【samba 共享盘 】---Windows10 将服务器映射 到本地盘

					
热门推荐

				
			

			

				

					秋知叶i
				

				

					10-24
					
					1万+
					
				

			

		

		

			
				
在编程的艺术世界里，代码和灵感需要寻找到最佳的交融点，才能打造出令人为之惊叹的作品。而在这座秋知叶i博客的殿堂里，我们将共同追寻这种完美结合，为未来的世界留下属于我们的独特印记。

			
		

	





	

		

			

				
					
c++映射详解

				
			

			

				

					Yoyo的博客
				

				

					03-18
					
					1621
					
				

			

		

		

			
				
因为元素键在map中是唯一的，所以插入操作首先检查给定键是否已存在于map中，如果键已存在于map中，则它不会插入map中，并且迭代器将迭代到现有键返回，否则在map中插入新元素。因为map的每一对映射都有两个typename，所以，我们使用“it->first”来访问“键”(下标)，而使用“it->second”来访问“值”（内容）。其中，typename1是映射前的类型（键key），typename2是映射后的类型（值value），name为映射的名字。m.erase();//定义映射类型的迭代器。

			
		

	





	

		

			

				
					
windows C++：进程间通信高实时性、安全、数据量大的通信方式（一）文件映射 (File Mapping)

				
			

			

				

					Bobowen的博客
				

				

					05-15
					
					1168
					
				

			

		

		

			
				
文件映射通过将文件的部分或全部内容映射到一个或多个进程的虚拟地址空间，使得这些进程可以像访问普通内存一样访问文件内容。创建或打开文件：进程首先需要创建或打开一个文件。创建文件映射对象：通过调用 Windows API 函数，创建一个文件映射对象。这个对象表示文件的映射视图。映射视图到内存：使用函数将文件映射对象的一个视图映射到进程的地址空间中。

			
		

	





	

		

			

				
					
c++内存映射文件代码

				
			

			

				

					06-09
				

			

		

		

			
				
以下是一个使用 C++ 实现的内存映射文件的代码示例：

```c++
#include <iostream>
#include <fstream>
#include <sys/mman.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <unistd.h>

int main() {
    int fd = open("example.txt", O_RDWR);
    if (fd == -1) {
        std::cerr << "Failed to open file." << std::endl;
        return 1;
    }

    struct stat sb;
    if (fstat(fd, &sb) == -1) {
        std::cerr << "Failed to stat file." << std::endl;
        close(fd);
        return 1;
    }

    void* addr = mmap(NULL, sb.st_size, PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    if (addr == MAP_FAILED) {
        std::cerr << "Failed to mmap file." << std::endl;
        close(fd);
        return 1;
    }

    std::cout << "File content: " << std::endl;
    std::cout << static_cast<char*>(addr) << std::endl;

    // 修改文件内容
    char* content = static_cast<char*>(addr);
    content[0] = 'H';

    // 刷新内存映射
    if (msync(addr, sb.st_size, MS_SYNC) == -1) {
        std::cerr << "Failed to msync." << std::endl;
        munmap(addr, sb.st_size);
        close(fd);
        return 1;
    }

    munmap(addr, sb.st_size);
    close(fd);
    return 0;
}
```

在上面的代码中，首先使用 `open()` 函数打开文件，并获取文件描述符。然后使用 `fstat()` 函数获取文件的信息，包括文件大小。接着使用 `mmap()` 函数将文件映射到进程地址空间中，并返回映射的起始地址。在访问文件内容时，可以直接使用映射的地址。在修改完文件内容后，需要通过 `msync()` 函数刷新内存映射，将修改结果写入磁盘。最后，需要使用 `munmap()` 函数关闭内存映射，并使用 `close()` 函数关闭文件描述符。

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值