protobuf 之诡异的文件流与压缩

本文比较了GzipOutputStream和OstreamOutputStream在文件流处理中的行为,指出OstreamOutputStream没有显式Flush方法,因为早期的编程趋势倾向于在对象析构时自动释放资源。作者还展示了如何在protobuf中使用Ostream进行序列化操作。
摘要由CSDN通过智能技术生成

内容较干。文章大概需要花费5分钟简单了解下。

1、Gzip

代码
直接看源码头文件如上图。压缩对象 GzipOutputStream ,通过函数操作可以看到整个文件流是比较完整并清晰。
因为它显示清晰包含了 从初始化 到 flush 到 close 的显示调用

2、Ostream

源码头文件

直接看源码头文件如上。流对象 OstreamOutputStream ,通过函数操作可以看到整个文件流很奇怪。奇怪在于它只有流函数,没有Flush

为啥没有Flush呢?

听网友们的意思是:几年前流行面向对象 和 RAII,很多对象只能在析构函数中进行资源回收,Ostream 干了这个事…所以说需要加大括号使用局部变量来自动析构Flush,这样才能提前释放Ostream触发Flush成功写入

所以你的代码有bug吗?

	std::ofstream output;
	func()
	{
		/*
		***
		*/
		{// 析构中自动flush
			google::protobuf::io::OstreamOutputStream raw_output(&output);
			google::protobuf::io::CodedOutputStream coded_output(&raw_output);
	
			auto user_data = response->userdata();
			int fid = (int)user_data;
			coded_output.WriteVarint32(fid);
			coded_output.WriteVarint32(response->ByteSizeLong());
			response->SerializeToCodedStream(&coded_output);
	
		}
	}
Protobuf中的结构定义被称为"message"类型,类似于C/C++中的struct。一个message可以包含不同类型的字段,比如字符串、整数、列表等。例如,可以用电话簿中的数据作为一个message的例子: ```protobuf message Person { string name; int32 id; string email; repeated int32 samples; }; ``` 在上面的例子中,Person是一个message类型,包含了name、id、email和samples这些字段。name和email是字符串类型,id是整数类型,samples是一个整数类型的列表。 当定义完proto文件后,需要使用protobuf提供的编译工具将proto文件编译成对应语言的源码。以C++为例,使用命令`protoc -I=./ --cpp_out=./ test.proto`会生成两个文件:`test.pb.h`和`test.pb.cc`,通常将`test.pb.cc`重命名为`test.pb.cpp`。这些文件包含了根据proto文件生成的对应的C++代码,可以用于序列化和反序列化message。 Protobuf是由Google团队开发的用于高效存储和读取结构化数据的工具。相比于XML和JSON这类存储结构化数据的格式,使用Protobuf表示的数据更加高效,并且可以将数据压缩到更小的体积,大约是JSON格式的1/10,XML格式的1/20。因此,Protobuf在网络传输和存储数据方面具有优势。 在使用Protobuf进行序列化时,可以使用不同的函数进行反序列化。例如,可以使用`ParseFromIstream`从输入解析,`ParseFromString`从字符串解析,以及`ParseFromArray`从字节解析。这些函数可以将序列化后的数据转换为对应的message对象。<span class="em">1</span><span class="em">2</span><span class="em">3</span><span class="em">4</span>
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值