protobuf C++

最新推荐文章于 2024-09-25 22:50:38 发布
最新推荐文章于 2024-09-25 22:50:38 发布
阅读量1.7k 收藏
点赞数
分类专栏： Caffe
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/raby_gyl/article/details/62889661
版权

protobuf C++

学习Caffe 无可避免的要学习和了解一下protobuf.
Caffe使用的是proto2版本。因此，我们下面下载proto2.

Caffe中使用的是(caffe.pb.h文件中)可以看到：

#define GOOGLE_PROTOBUF_MIN_LIBRARY_VERSION 3001000

即caffe.hp.h和caffe.hp.cc是使用protoc-3.1.0编译生成的。

注：这里总是给人误解，proto2的版本(proto2和proto3语法发生了某些变化)，给出的protoc编译器却是protoc-3.1.0以3开头的。

protobuf 官方文档：

https://developers.google.com/protocol-buffers/docs/cpptutorial

  1. Define message formats in a .proto file.
  2. Use the protocol buffer compiler.
  3. Use the C++ protocol buffer API to write and read messages.

就像官网说的那样，仅需三个步骤就搞定：

  1. 定义一个.proto文件
  2. 使用protoc.exe编译.proto文件，生成.h和.cpp文件
  3. 使用C++protoAPI读写信息。

protobuf编译工具下载和安装：

旧版本下载地址：

http://repo1.maven.org/maven2/com/google/protobuf/protoc/

因为我们的Caffe代码包含了所需要的proto头文件和库文件，因此我们直接下载的可执行文件：

protoc-3.1.0-windows-x86_64.exe

使用下面的命令参数：

protoc-3.1.0-windows-x86_64.exe -I="E:/" --cpp_out="E:/" "E:/addressbook.proto"

格式为：

protoc -I=$SRC_DIR --cpp_out=$DST_DIR $SRC_DIR/addressbook.proto

然后在文E盘下就生成两个文件：addressbook.pb.cc 和 addressbook.pb.h

注：生成的两个文件依赖proto头文件和库文件，请确保自己电脑上面含有。

写消息：write_message.cpp


#include "stdafx.h"
#include<iostream>
#include<fstream>
#include<string>
#include"addressbook.pb.h"
using namespace std;

//this funtion fill in a Person message based on user input
void PromptForAddress(tutorial::Person *person)
{
    cout << "Enter person ID number:";
    int id;
    cin >> id;
    person->set_id(id);

    cin.ignore(256, '\n');
    cout << "Enter name:";
    //使用指针的形式，设置成员的值，->优先级高于*,mutable_name返回string类型的指针,通过*进行解引用操作。
    getline(cin, *person->mutable_name());
    cout << "Enter email address (blank for none):";
    string email;
    getline(cin, email);
    if (!email.empty())
    {
        //使用set函数设置成员的值
        person->set_email(email);
    }
    while (true)
    {
        cout << "Enter a phone number(or leave blank to finish):";
        string number;
        getline(cin, number);
        if (number.empty())
        {
            break;
        }
        //message中嵌套类型的使用：首先获取地址，然而对嵌套中的成员进行值的读写
        tutorial::Person::PhoneNumber *phone_number = person->add_phones();
        phone_number->set_number(number);
        cout << "Is this a mobile ,home,or work phone?";
        string type;
        getline(cin, type);
        if (type == "mobile")
        {
            //message中枚举类型的使用
            phone_number->set_type(tutorial::Person::MOBILE);
        }
        else if (type == "home")
        {
            phone_number->set_type(tutorial::Person::HOME);
        }
        else if (type == "work")
        {
            phone_number->set_type(tutorial::Person::WORK);
        }
        else
        {
            cout << "unknown phone type. using default." << endl;
        }

    }

}


/*main函数，从文件中读取完整的address book
用输入的方式来增加一个person,然后将其入同样的文件中。
*/
int main(int argc, char* argv[])
{
    //检查连接的库的版本和编译的头文件的版本是否兼容
    //GOOGLE_PROTOBUF_VERIFY_VERSION;
    if (argc != 2)
    {
        cerr << "usage: " << argv[0] << "ADDRESS_BOOK_FILE" << endl;
        return -1;
    }
    tutorial::AddressBook address_book;
    {
        //读取现有的 address book
        fstream input(argv[1], ios::in | ios::binary);
        if (!input)
        {
            cout << argv[1] << "File not found. Creating a new file. " << endl;
        }
        else if (!address_book.ParseFromIstream(&input))
        {
            cerr << "Failed to parse address book. " << endl;
            return -1;
        }

    }
    //增加一个address
    PromptForAddress(address_book.add_person());
    {
        //将新的address 写回到disk
        //ios::trunc写入前先将内容全部清空
        fstream output(argv[1], ios::out | ios::trunc | ios::binary);
        if (!address_book.SerializeToOstream(&output))
        {
            cerr << "Failed to write address book. " << endl;
            return -1;
        }
    }
    //可选的：删除libprotobuf分配的所有全局对象
    google::protobuf::ShutdownProtobufLibrary();
    return 0;
}

读消息: read_message.cpp

#include "stdafx.h"
#include<iostream>
#include<fstream>
#include<string>
#include"addressbook.pb.h"

using namespace std;

//迭代的访问addressbook中的所有人，并且打印输出他们的信息
void ListPeople(const tutorial::AddressBook& address_book)
{
    for (int i = 0; i < address_book.person_size(); i++)
    {
        const tutorial::Person &person = address_book.person(i);
        cout << "Person ID: " << person.id() << endl;
        cout << "Name: " << person.name() << endl;
        if (person.has_email())
        {
            cout << "E-mail address: " << person.email() << endl;
        }
        for (int j = 0; j < person.phones_size(); j++)
        {
            const tutorial::Person::PhoneNumber &phone_number = person.phones(j);
            switch (phone_number.type())
            {
            case tutorial::Person::MOBILE:
                cout << " Mobile phone #: ";
                break;
            case tutorial::Person::HOME:
                cout << " Home phone #: ";
                break;
            case tutorial::Person::WORK:
                cout << "Work phone #：";
                break;
            }
            cout << phone_number.number() << endl;
        }
    }

}

//main 函数：从file 中读取完整的adress，并且打印出内部的所有信息
int main(int argc, char * argv[])
{
    //验证连接库的版本和编译的头文件的版本是否一致
    GOOGLE_PROTOBUF_VERIFY_VERSION;
    if (argc != 2)
    {
        cerr << "usage: " << argv[0] << " address_book_file" << endl;
        return -1;
    }
    tutorial::AddressBook address_book;
    {
        //读取现有的address book 
        fstream input(argv[1], ios::in | ios::binary);
        if (!address_book.ParseFromIstream(&input))
        {
            cerr << " failed to parse address book." << endl;
            return -1;
        }
    }
    ListPeople(address_book);
    //可选的：删除libprotobuf分配的所有全局对象
    google::protobuf::ShutdownProtobufLibrary();
    return 0;
}

caffe 中的protobuff

在caffe中，利用goolge的文本类型的类进行解析.prototxt文件,形如下:

tutorial::AddressBook address_book;
const char * filename = "addressbook.prototxt";
int fd = _open(filename, O_RDONLY);
FileInputStream * input = new FileInputStream(fd);
bool success = google::protobuf::TextFormat::Parse(input, &address_book);

解析后的内容全部存储在address_book对象中。

其中AddressBook就是上面通过编译器生成的类。

addressbook.prototxt文件的内容如下：

person
{
 name : "zhangsan"
 id: 2011010227
}
person
{
 name: "lisi"
 id: 2011010339
 phones
 {
   number :"13026150789"
   type: WORK
 }
}

测试的主函数定义如下：

#include "stdafx.h"


#include<google/protobuf/io/zero_copy_stream_impl.h>
#include<google/protobuf/text_format.h>

#include"addressbook.pb.h"
#include<iostream>
#include<fstream>
using namespace std;
using google::protobuf::io::FileInputStream;
using google::protobuf::io::FileOutputStream;


#include<fcntl.h>
#include<io.h> //for windows

int main(void)
{

    // protobuf 的使用
    tutorial::AddressBook address_book;
    const char * filename = "addressbook.prototxt";
    int fd = _open(filename, O_RDONLY);
    FileInputStream * input = new FileInputStream(fd);
    bool success = google::protobuf::TextFormat::Parse(input, &address_book);

    //输出

    for (int i = 0; i < address_book.person_size(); i++)
    {
        cout << "Name :" << address_book.person(i).name();
        cout << ", ID :" << address_book.person(i).id();

        for (int j = 0; j < address_book.person(i).phones_size(); j++)
        {
            cout << ", PhoneNumber:" << address_book.person(i).phones(j).number();
        }
        cout << endl;
    }
}

运行结果：
这里写图片描述

参考文献：

1 http://www.cnblogs.com/lidabo/p/3911456.html [protobuf c++入门]
2.http://blog.csdn.net/majianfei1023/article/details/45112415 [google protobuf学习笔记二：使用和原理]
3.http://blog.csdn.net/eclipser1987/article/details/8525383 [google protocol buffer (C++,Java序列化使用实例)]
4.http://blog.csdn.net/hailong0715/article/details/52057873 ProtoBuf安装和使用简介

机器学习的小学生
关注
专栏目录
对caffe的训练model和prototxt文件进行layer参数读取，主要对conv、pool和inner里面参数读取
04-17
对caffe的训练model和prototxt文件进行layer参数读取，主要对conv、pool和inner里面参数读取
protobuf c++
05-04
NULL 博文链接：https://tianmaotalk.iteye.com/blog/2431241
Cpp(九) gRPC protobuf for C++ 基本使用
Auto
12-01 2431
文章目录Mac gRPC for C++#0 源码#1 环境#2 安装#3 开始#3.1 说明#3.2 目录结构#3.3 proto文件#3.4 gRPC服务端(C++)#3.6 gRPC客户端(Python/C++)#3.6.1 Python#3.6.2 C++#3.7 效果#4 遇到的问题 Mac gRPC for C++ #0 源码 https://github.com/Coxhuang/FKCpp/tree/master/gRPCDemo #1 环境 C++14 Python 3.8 macOS 1
Proto3 深度解读：Protobuf 的用法与实例分析（C++）
最新发布
卜及中的博客
09-25 789
本文首先通过序列化与反序列化的介绍引入 Protobuf 这一工具；再详细介绍了Protobuf的内容、编译、生成文件；随后就Protobuf的使用以实例结合理论进行讨论；最后重点介绍proto3语法的相关类型，比如：enum、Any、oneof等等
grpc|protobuf的安装、编译、运行笔记(C++)
小谢的博客
09-12 2025
如果你的电脑/服务器可以做代理，然后稳定链接上。开始编译（可能会编的有点久，看个人机器）此时格式替换完成，我们就可以开始编译。这个路径，然后执行下面的操作即可完成。的官方文档来操作，我这里采用。下载的文件，所以文本格式为。，否则编译会报错，我们通过借助。编译完成，接下来就是编译。就完成了，接下来就是学习。的四种模式了，下期再见~文件，我们将其替换成。我们只需要apt安装即可。目录，然后里面有一个。的链接，首先清空内容。，我们需要将其转化为。假设新建库的输出路径。编译完成后此时我们进入。
CMake使用gRPC(Protobuf) 的c++ demo
howard789的博客
06-29 1335
最后实际生成的位置是加上package路径的/home/user/grpc_demo_ws/grpc_demo/hello_world/proto/2. 如果pb.cc/pb.h/grpc.pb.cc/grpc.pb.h想要和proto放在同一个目录。--grpc_out 和 --cpp_out 也都是填入/home/user/grpc_demo_ws。那--proto_path的值就是/home/user/grpc_demo_ws。其余*.pb.cc *.pb.h 是用cmake生成的。
Buf网络缓冲区（C++）
几番风雨的专栏
04-08 2210
Buf网络缓冲区 由于网络协议分包的需要，因此编写buf网络缓冲区，以便分包。 struct SBuf { char* _base=nullptr; char* _b=nullptr; char* _e=nullptr; size_t _size=0; SBuf(size_t size); SBuf(); ~SBuf(); char* data(){return _b;} ...
protobuf C++库
05-09
**protobuf C++库详解** Protocol Buffers（简称protobuf）是由Google开发的一种高效、灵活的数据序列化框架，类似于XML和JSON，但比它们更小、更快、更简单。它允许开发者定义数据结构，然后生成能够在各种语言...
基于Protobuf C++ serialize到char*的实现方法分析
09-05
在C++中，Protobuf提供了多种序列化和反序列化的方法，以适应不同的应用场景。本文将详细介绍如何使用Protobuf C++将数据序列化到`char*`，并探讨其在通过socket进行网络通信中的应用。 首先，让我们看下官方提供的...
protobuf C++
Sico2Sico
09-30 434
protobuf C++
protobuf c++库
05-17
protobuf c++库是Google开发的一种高效、灵活的数据序列化协议，用于在不同的数据结构和语言之间交换结构化数据。它的全称是Protocol Buffers，是一种跨平台、跨语言的序列化框架，旨在替代XML和JSON等传统数据交换...
C++下的gRPC与protobuf使用和介绍
yiyu20180729的博客
02-29 1730
gRPC 和协议缓冲区简介。本页介绍 gRPC 和协议缓冲区。gRPC 可以使用 协议缓冲区作为其接口定义语言 （IDL） 和基础消息 交换格式。如果你不熟悉 gRPC 和/或协议缓冲区，请阅读此内容！如果只想深入了解并首先查看 gRPC 的运行情况，请选择一种语言并尝试其快速入门。在 gRPC 中，客户端应用程序可以直接调用服务器应用程序上的方法 在不同的计算机上，就好像它是本地对象一样，使您可以更轻松地 创建分布式应用程序和服务。
C++工程，protobuf初识，读prototxt文件，下载安装，消息结构体详解，编译命令
m0_37542524的博客
07-04 1376
文章目录1，下载安装包2，解压安装2.1，查看版本3，使用3.1，定义数据结构体－－－编写config.proto3.1.1，一个字段由以下部分组成：3.1.1.1，指定字段规则3.1.1.2，指定字段类型3.1.1.3，分配标识号3.1.1.4，添加注释3.1.2，从.proto文件生成了什么？3.1.3，枚举3.2，使用protoc编译器进行编译3.2.1，导出Ｃ++包3.2.2，导出java...
【C++版本】protobuf与gRPC
喜欢打篮球的普通人
07-29 917
Google Protocol Buffers（protobuf）是一种语言中立、平台中立的序列化协议，旨在高效地将结构化数据进行序列化和反序列化。（3）Protobuf 可以与 gRPC 结合使用，定义和实现高效的 RPC 协议，支持流式传输和双向通信。每个字段有一个唯一的编号，用于标识字段。required：表示字段是必需的，消息必须包含该字段，否则解析消息时会报错。optional：表示字段是可选的，消息中可以包含也可以不包含该字段。每个字段有三部分：修饰符、类型和字段名，以及一个唯一的编号。
C++文件流读取
a266676的博客
06-26 828
通过运用ofstream和ifstream类去创建对象来进行文件读写。 使用文件流新建或打开一个文件，并写入字符串 "This is a test file". #include<fstream> #include<iostream> using namespace std; int main() { ofstream outFile("...
Protobuf Message的读写
bleedingfight的博客
03-01 1224
Protobuf文件 经常又这样的需求，自定义的protobuf文件，然后需要读取protobuf的二进制文件或者是文本文件以用来解析里面的参数，这样即可以通过protobuf文件，像使用json解析一样解析或者写入数据。例如为了更加方便的进行模型的推理：我在这里定义了模型的存储路径，模型文件的名称，测试图片的存放位置，测试图像的名称。实现这一需求的步骤如下： 创建protobuf消息 syntax = "proto3"; package inference; message DataConfig {
C++protobuf
05-14
C++protobuf源文件，需要CMake生成C++项目，然后编译生成可用release
C++ Protobuf
一米阳光
10-28 2306
ContentsCopyFrom MergeFrom PackFrom 区别与实现Reflection-反射操作参考文档 CopyFrom MergeFrom PackFrom 区别与实现 // Make this message into a copy of the given message. // 基本等价与 Clear() + MergeFrom(from); void Message::CopyFrom(const Message & from) // Singular field
protobuf生成prototxt文件
张洁的笔记
11-20 2689
使用protobuf可以分为以下几步： 1 .proto文件的定义，在这个文件中定义了最终生成的prototxt格式 举个例子如下所示： syntax = "proto2"; package label_proto; message DetectLabel { optional string name = 1; optional int32 label = 2; optional str...
Protobuf：Updating A Message （Protobuf更新.proto文件后用读取旧的信息流）
Bobowen的博客
09-19 664
Protobuf
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值