利用C++文件流进行数据块的读写

最新推荐文章于 2021-11-13 23:28:49 发布
最新推荐文章于 2021-11-13 23:28:49 发布
阅读量2.7k 收藏 1
点赞数
文章标签： ofstream 存储 文件读写 open 数据块
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tmshasha/article/details/46874455
版权

科研项目上遇到一个文件流的读写问题，要把一个图片像素大小（1392*1038）的矩阵（double型）数据写入磁盘，一开始是用ofstream将数据逐个写入txt文件中，这样做的结果就是写出的文件太大，不利于存储和转移，而且读写速度奇慢，很影响后续工作的速度。还好最近看了leveldb的源码，知道用ofstream的read、write函数将内存中的一块数据与磁盘进行读写。尝试了下，速度和文件的大小都大大改善。
打开文件的方式在ios类(所以流式I/O的基类)中定义，有如下几种方式：

  1. ios::in 为输入(读)而打开文件
  2. ios::out 为输出(写)而打开文件
  3. ios::ate 初始位置：文件尾
  4. ios::app 所有输出附加在文件末尾
  5. ios::trunc 如果文件已存在则先删除该文件
  6. ios::binary 二进制方式

具体的如果你要像我一样将内存中的一块数据写入磁盘，就要设置打开方式ios::binary，默认是ios::text；
读写时，记得将指向内存中数据块的指针转化为char*；
源码如下：

__int64 buffsize = sizeof(double)*W_I_D_T_H*H_E_I_G_H_T;

ifstream H1("./pd_bmp/pd_R_X_1.bin",ios::in|ios::binary);
double *h1 = new double[W_I_D_T_H*H_E_I_G_H_T];
    //图像尺寸W_I_D_T_H*H_E_I_G_H_T
H1.read((char*)h1,buffsize);
aFXbEGIN
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
C/C++快速读写磁盘数据的方法-块读取/异步/优化分析算法/内存文件映射的原理和使用
自由理想的足迹
03-08 1万+
快速读写磁盘数据的方法： 1.一下子将数据读取到内存的（无论是文本还是二进制)，而不是一行行的读取。 2.异步的IO，创建多线程，或者使用重叠IO,IO复用，异步的事件回调通知机制（可以用事件对象，信号驱动来实现)。 3.使用内存文件映射, window是CreateFileMapping，MapViewOfFile，UnmapViewOfFile，CloseHandle；linux是用
c++_多进程对文件进行分块读取并进行系统调用
07-29
用c++实现了多进程对文件的分块读取，并把读取的内容通过c++库函数对LINUX下的命令进行了系统调用
关于使用C++写数据块
qq_45911550的博客
06-13 475
提供一些自己写的运行成功的代码以供初学者参考： 废话不多说，直接上代码，上面写了一些注释，以供参考 这是写入文件的代码： #include<iostream> #define N 1 using namespace std; struct U_school { char name[10]; int age; double point; }; int main() { struct U_school u = {"任奥维",20,80}; FILE* p;
C++读写文件数据块
实践求真知
03-24 2184
一复制文件 1代码 // Copy a file #include <fstream> // std::ifstream, std::ofstream int main() { std::ifstream infile("myfile.txt", std::ifstream::binary); std::ofstream outfile("new....
第33课 文件流和数据流
中年人
03-23 592
1、文件类型    1.1、 Qt中将文件类型分为两大类        1.1.1、 文本文件：文件内容是可读的文本字符        1.1.2、 数据文件：文件内容是直接的二进制数据    1.2、 QFile直接支持文本文件和数据文件的读写            .cpp文件#include &lt;QtCore/QCoreApplication&gt;#include &lt;QIODev...
c++读写文件流实例程序讲解
09-04
在 C++ 中，文件流主要用于处理文件的读写操作。文件流基于 `iostream` 库，并使用了流的概念来实现对文件的操作。主要涉及到三个类： - **`fstream`**：支持文件的读写操作。 - **`ifstream`**：只支持文件读取...
C++读写文本文件和二进制文件（源代码）
最新发布
05-06
本文将详细介绍如何使用C++中的`fstream`库来进行文本文件和二进制文件的读写操作。我们将通过具体的代码示例来解释如何利用这些功能，以及在实际应用中需要注意的一些关键点。 #### 二、文本文件读写 ##### 1. ...
C++读写CSV文件
01-13
本篇文章将详细介绍如何利用C++标准模板库（STL）中的`vector`容器来读取和写入CSV文件。 ### CSV文件的基本概念 CSV文件是由逗号分隔的一系列数据，每一行代表一个记录，每一列代表一个字段。这样的结构使得CSV...
C++ 读写 parquet 文件 Demo
04-17
通过以上步骤，你可以在 C++ 项目中实现 Parquet 文件的读写，充分利用其高效的数据存储和查询能力。在实际应用中，还可以结合其他数据处理框架或库，如 Apache Spark，以进一步提升数据处理能力。
CSV文件读写 C++语言
04-15
总的来说，C++处理CSV文件需要理解文件流操作、字符串处理和数据结构，通过这些基础工具，我们可以构建灵活且强大的CSV读写功能。如果项目需求复杂，引入成熟的第三方库可以提高开发效率和代码质量。
C++逐行读取txt整条内容和分段内容
10-23
通过提取输入文件（txt格式），输出每个学生的作业平均分和总分，并根据人数和作业数自动修改 number_of_students 9 number_of_assignments 3 student_number first_name last_name 10 10 10 98861 BOB BARKER 8 5 9 23091 bill kerman 6 9 10 48701 bob kerman 10 10 10 55335 jebediah kerman 5 6 5 25825 val kerman 10 7 5 70558 STEVE ROGERS 10 5 9 89390 Luke Skywalker 5 7 10 83937 TONY STARK 8 10 10 18150 Darth Vader 10 6 6
C实现的分块读取较大文件
08-22
一个用C语言实现的分块读取文件程序，能有效的解决读取较大文件时间过久的问题
分块读取大文件
weixin_42568012的博客
11-20 652
读取所有列的话cols = all def r_file(file,cols): list1=[] for part in pd.read_csv(file,usecols=cols,chunksize=50000): list1.append(part) df=pd.concat(list1) del list1 del pa...
c++读取文件操作
qq_44257811的博客
08-06 351
目的：定义一个结构体，把文件中的所有状态信息读取出来，然后将其放入一个vector的容器中。 ----------------------------------分割线------------------------------------------- 文件格式如下大致; 1 换向手柄 106,-107,-105 换向手柄—前 1 换向手柄 106,107,-105 换向手柄—后 1 换向手柄 -106,-107,105 换向手柄—切 2 制动手柄 -95，96，-97，-98，-99，-100，-1
按块读取大文件
Duplan的专栏
04-17 4423
大文件，如4G大小，不能像普通文件那样一次读入内存中，因此需要按块读取文件，然后进行处理。典型用例，如在外部排序中，需要对大文件进行按块读取。 C实现按块读取 FILE *fp; fp=fopen("bigfile.txt","rb"); int strNum; char buffer[100];//每块大小 while((strNum=fread(buffer,sizeof(char),10
按块进行读写
码云仓库地址：https://gitee.com/lance-gyq
05-08 200
按块进行读写 写文件 fwrite 参数1 数据地址 参数2 块大小 参数3 块个数 参数4 文件指针 读文件 fread 代码示例： //3.按块进行读写 struct Hero { char name[64]; int age; }; void test03() { //写文件 FILE*f_write = fopen("./test3.txt", "wb");//二进制方式写入 if (f_write
C/C++简单实现文件分块
WINGREZ‘S BLOG
10-12 5406
C语言简单实现文件分块 模块1：分割文件 指定目标输入文件（文件名或文件路径）和分割尺寸，要求分割尺寸（单位：MB）为正整数，且范围在[MIN_SIZE, MAX_SIZE]。 分割后产生块文件，命名格式为“part_”+编号。 模块2：合并文件 指定目标输出文件（文件名或文件路径）。 顺序合并块文件。 #include&lt;stdio.h&gt; #include&lt;stdlib....
QT/C++从新手到老手系列之QT中级篇
08-01
本阶段主要带领同学们完成以下几个方面的学习：文件、目录、输入输出、典型案例演示，QT自定义外观设计、样式表设计与实现、绘制模式、典型案例演示，XMl原理、接口设计、SAX、DOM等，数据库基本原理、Sqlite、mysql接口、可视化工具、QSqlQueryModel、QSQLtableModel、QSQLrelationModel等，XML、SQL典型应用程序增删改查等。
10 C++的IO流
精致的灰的博客
11-13 1202
IO是输入input输出output的首字母缩写形式，直观意思是计算机输入输出。 文章目录一、C++IO流1.1. C++标准IO流1.2. C++文件IO流使用>>和<<对文件进行读写1.3. 将日期类写入文件并从文件中读取二、stringstream 一、C++IO流 和C语言的scanf、printf、fread、fwrite等IO类似，C++有自己的IO接口。 C++系统实现了一个庞大的类库，这个库叫做IO流，其中ios为基类，其他类都是直接或间接派生自ios类： 1.
C++利用文件流 进行文件读写的一般方法。
05-05
文件读写操作是 C 语言中非常常见的操作之一，可以使用文件流来进行文件读写。一般的文件读写流程如下： 1. 打开文件流：使用 `fopen()` 函数打开文件，返回文件指针。 2. 读/写文件：使用 `fread()` 或 `fwrite()` 函数进行读/写操作。 3. 关闭文件流：使用 `fclose()` 函数关闭文件流。 下面是一个简单的示例，演示了如何使用文件流进行文件读写： ```c #include <stdio.h> int main() { FILE *fp; char buffer[100]; // 打开文件 fp = fopen("example.txt", "w+"); if(fp == NULL) { printf("无法打开文件\n"); return 1; } // 写入数据 fprintf(fp, "这是一个测试文件\n"); fputs("这是一个 fputs 测试\n", fp); // 读取数据 fseek(fp, 0, SEEK_SET); fread(buffer, sizeof(char), sizeof(buffer), fp); printf("%s", buffer); // 关闭文件 fclose(fp); return 0; } ``` 在上述示例中，我们首先使用 `fopen()` 函数打开了一个文件流，并将其指针保存到 `fp` 变量中。接着，我们使用 `fprintf()` 和 `fputs()` 函数向文件中写入数据。然后，我们使用 `fseek()` 函数将文件指针移动到文件开头，并使用 `fread()` 函数读取文件中的数据，将其保存到 `buffer` 数组中。最后，我们使用 `fclose()` 函数关闭文件流。 需要注意的是，在进行文件读写操作时，我们需要确保文件已经正确打开，否则会导致程序崩溃。此外，我们还需要对文件进行读写权限的检查，以确保我们有足够的权限对文件进行操作。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值