protobuf支持非UTF8字符串

最新推荐文章于 2024-07-29 17:01:19 发布
最新推荐文章于 2024-07-29 17:01:19 发布
阅读量1.2w 收藏 3
点赞数
分类专栏： 程序开发 文章标签： protobuf utf8
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chaimyu/article/details/43531513
版权

protobuf支持非UTF8字符串


protobuf规范string类型是必须是UTF8字符,但在C/C++中可以直接调用set方法设置任意编码方式的字符串,也可以直接取得对应字符串,但在控制台中会打印出编码不是UTF8字符的错误信息.

最低0.47元/天 解锁文章
chaimyu
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
protobuffer中string和bytes类型
langzi989的专栏
04-03 1万+
博客搬家，原地址：https://langzi989.github.io/2017/06/07/protoBuffer中string与byte类型区别/ 从上一节protobuffer的介绍中我们知道字符串类型在protobuffer中有string和bytes两种类型，那这两种类型有什么区别呢,什么时候用string,什么时候用bytes。在C++中两种类型分别对应的是什么类型.下面将揭开迷雾 ...
Protobuf调用Utf8DebugString()发生coredump问题
qq_35547879的博客
05-29 198
src。
关于Protobuf 输入输出中文到文件中的一系列问题
最新发布
HUANG_XIAOJUN的博客
07-29 281
1、读取，还是可以正常读取，但是获取到的 strParaName 值，是八进制转义字符串，，如果是qt 等使用，使用QString 去转一下，还是可以直接获取到中文字符串的，2、写入，，如果直接使用上述方式写入，，，文件中的中文 就是八进制转义字符串，，是人不可读的，，如下。2、写入文件（是人可读的，有点类似与json 格式那种）二、如果定义中是bytes ，且值是中文的。三、解决，只能通过自己转换的方式。一、不含中文的常规处理。
c++使用Protobuf Message转Json字符串（Json库使用Json cpp）
11-23 1万+
为了一些项目的需要，可能需要google protobuf 的Message结构与Json结构进行互转。我本人也在近期的项目中使用到这个，虽然可以自己写代码一个变量一个变量的进行转化，但终究觉得使用自动化处理会更好，一步到位，其他的成分就只是处理逻辑罢了。因此在项目中做了一个简单的封装，并且已经得到了项目的验证。今天先将protobuf Message转Json结构的代码献上，供大家玩味吐槽，下一
protobuf之string bytes的区别
热门推荐
purple尘的专栏
09-22 4万+
转自：http://izualzhy.cn/c/cpp/2017/03/20/protobuf-difference-between-string-and-bytes protobuf提供了多种基础数据格式，包括string/bytes。从字面意义上，我们了解bytes适用于任意的二进制字节序列。然而对C++程序员来讲，std::string既能存储ASCII文本字符串，也能存储任意
ProtoBuf在中C++使用介绍
weixin_44498318的博客
03-31 2491
ProtoBuf 我们先来看看官方文档给出的定义和描述： protocol buffers 是一种语言无关、平台无关、可扩展的序列化结构数据的方法，它可用于（数据）通信协议、数据存储等。 Protocol Buffers 是一种灵活，高效，自动化机制的结构数据序列化方法－可类比 XML，但是比 XML 更小（3 ~ 10倍）、更快（20 ~ 100倍）、更为简单。 你可以定义数据的结构，然后使用特...
解析协议缓冲区时包含无效的UTF-8数据。如果您打算发送原始字节，请使用“bytes”类型问题
森明帮大于黑虎帮的博客
06-06 2303
我确定至少在C++中，我们在解析过程中验证字符串是UTF-8，而不是在序列化过程中。因此，如果C++做了类似的事情，那么就有可能用非UTF-8字符串来序列化proto，这在稍后再次解析proto之前不会被检测到。如果您需要能够在该字段中存储非UTF-8数据，那么您可能需要考虑将其从字符串字段更改为字节字段，这通常是一种安全的更改。字符串字段仅用于存储UTF-8数据，因此如果您需要发送非UTF-8数据，那么最好使用。类型都对应与**C++**的std::string类型。关于第二点，两个函数都定义在**
Google.Protobuf和protoBuf-net中utf-8反序列化问题
SinCsdn_Jun的博客
06-20 3100
最近在项目中使用谷歌的protoBuf协议做数据传输，.proto文件中定义的数据类型如下 //请求消息 message RequestMsgData { //请求消息类型 int32 req_type = 1; //请求消息具体内容 bytes req_body=2; //客户ID bytes client_id = 3; //请求客户端连接uuid---回报消息用 bytes client_conn_uuid = 4; //请求...
golang unicode转utf-8
VN2015的博客
03-25 4650
golang unicode转utf-8Unicode和utf-8的区别具体转换代码 Unicode和utf-8的区别 参考文章 具体转换代码 func handleResponse(resp *http.Response) (string, error) { respBytes, err := ioutil.ReadAll(resp.Body) defer resp.Body.Close()...
ebms_dll_pbbase64加密解密_Base64.dll_Base64utf-8
09-11
这里我们关注的是“pb base64加解密”和“utf-8转码”，这涉及到编程中的两种常见操作：Base64编码和解码以及字符串的字符编码转换。 首先，让我们了解Base64编码。Base64是一种用于将二进制数据转换为可打印ASCII...
proto文件支持继承吗_protobuf一些注意事项
weixin_39889487的博客
12-22 8509
读完protobuf一些文档，写点东西，权作记忆。google发布了protobuf v3，为了pb更好用，更跨语言，他对protobuf v2做了以下change：1. Removal of field presence logic for primitive value fields(匪夷所思，留存以待以后翻译出来), 删除required(大大地赞同，即保留repeated，required...
protobuf的编码方式
02-02 553
本文介绍protobuf的编码方式。源地址 一个简单的消息 message Test1 { required int32 a = 1; } 我们创建一个Test1消息，给a赋值150，序列化之后存储，我们得到如下的3个byte数据（16进制表示）： 08 96 01 非常的简洁，那么这是如何得到的呢？下面我们开始分析 Varints编码 首先介绍Var
在Python中使用protobuf2.6.1 string format utf-8 and unicode error
weixin_30483495的博客
09-29 644
版本信息: protobuf: v2.6.1 python: 2.7 关于在Python中使用protobuf时 string格式字段的编码问题 在python中编码格式多采用utf-8格式。而protobuf 官网中这样说到： 如果不做处理，在message 中定义了一个string类型的字段后，出现错误如下: ERROR： ValueError: '...
[翻译] ProtoBuf 官方文档（五）- 编码
weixin_44498318的博客
04-01 260
翻译查阅外网资料过程中遇到的比较优秀的文章和资料，一是作为技术参考以便日后查阅，二是训练英文能力。 此文翻译自 Protocol Buffers 官方文档 Encoding 部分 翻译为意译，不会照本宣科的字字对照翻译 以下为原文内容翻译 编码 本文档描述了 Protocol Buffer 的 Message 的二进制格式。你无需了解这个知识点也能够在你的...
protobuf:字符编码
aggs1990的专栏
07-12 453
repeatedlastrepeated通常，一个编码的消息永远不会有一个以上的非重复字段实例。然而，解析器应该处理它们这样做的情况。对于数字类型和字符串，如果同一个字段多次出现，解析器会接受它看到的最后一个值。对于嵌入的消息字段，解析器会合并同一字段的多个实例，就像使用message::MergeFrom方法一样——也就是说，后一个实例中的所有奇异标量字段都会替换前一个实例，奇异嵌入消息会被合并，重复字段会被连接。
protobuf c++ 序列化为string_从前端的角度理解 Protobuf
weixin_39923945的博客
11-30 1539
Protocol Buffer 是什么 Protocol Buffers are a language-neutral, platform-neutral, extensible way of serializing structured data for use in communications protocols, data storage, and more, originally des...
protobuf 编码实现解析（java）
木牛的博客
10-19 1565
一：protobuf编码基本数据类型 public enum FieldType { DOUBLE (JavaType.DOUBLE , WIRETYPE_FIXED64 ), FLOAT (JavaType.FLOAT , WIRETYPE_FIXED32 ), INT64 (JavaType.LONG , WIRETYPE_VARINT ), UINT64 (JavaType.
Protobuf（Google Protocol Buffer）编码学习笔记
韩超的博客 (hanchao5272)
03-20 1151
在之前学习RabbitMQ的过程中，涉及到了Protobuf协议，下面对之前学习时做的笔记进行整理，作为今后参考的依据。 1.协议介绍 Google Protocol Buffer是google 的一种数据交换的格式，它独立于语言，独立于平台。google 提供了多种语言的实现：java、c#、c++、go、python、js等，每一种实现都包含了相应语言的编译器以及库文件。由于它是一...
protobuf c++ 字符编码 设置
08-26
在ProtoBuf中，可以使用以下方法来设置字符编码： 1. 在.proto文件中定义一个message类型，使用关键字message来指定。可以使用字符串类型的字段来表示字符编码设置。例如，可以在定义message的字段时，使用string类型的字段来表示字符编码设置。 2. 在C++代码中，可以使用编译器生成的类来设置字符编码。每个message都会生成一个对应的C++类，该类继承自google::protobuf::Message。可以通过调用该类的方法来设置和获取字符编码的值。 例如，假设有一个名为Person的message类型，在C++代码中可以使用以下方法来设置字符编码： ```cpp // 创建一个Person实例 tutorial::Person person; // 设置字符编码 person.set_encoding("UTF-8"); ``` 其中，`set_encoding`是编译器自动生成的方法，用于设置字符编码字段的值。 请注意，以上只是示例代码，实际使用时需要根据具体的message类型和字段名称进行相应的设置。同时，还可以根据需要使用protobuf提供的其他方法来设置和获取字符编码的值。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [ProtoBuf C++入门解析一](https://blog.csdn.net/qq135595696/article/details/125825476)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值