Thrift之TProtocol类体系原理及源码详细解析之稠密协议类TDenseProtocol

最新推荐文章于 2013-08-13 23:42:34 发布
最新推荐文章于 2013-08-13 23:42:34 发布
阅读量2.2k 收藏 1
点赞数 1
分类专栏： Thrift 跨语言的分布式数据传输框架thrift 文章标签： struct 新浪微博 编译器 测试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qiangweiloveforever/article/details/7713313
版权

我的新浪微博：http://weibo.com/freshairbrucewoo。

欢迎大家相互交流，共同提高技术。

这个协议类不建议投入到实际的生产环境（除非自己做了很强的压力和全面的测试）。这个密集协议的最大作用就是尽可能使用小的空间，密集协议类有两种类型的实例对象，一种是独立的，它不被使用在rpc通信中，而只是用于编码和解码；另一种是非独立的实例类型，它可以用于rpc通信，不过现在还不支持这种类型的实

了解本专栏 订阅专栏 解锁全文
蔷薇理想人生
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
thrift初步了解
10-20
简介： thrift是跨语言，server和client通信的一个框架，支持多种协议，二进制，文本http,json等方式，提供高效的数据传输方式。 thrift只负责对数据进行处理，然后在网络内进行传输的工作。不要认为thrift能在*.thrift文件中定义调度之类的工作 thrift通过IDL(接口描述语言)来生成各种语言需要的接口代码。 执行thrift文件命令： java：thrift-0.9.1.exe --gen java test.thrift java：thrift-0.9.1.exe --gen php test.thrift 生成使用thrift需要的jar包： 下载Ant后, 配置环境变量， ANT_HOME=Ant解压路径。 下载thrift后使用ant编译需要的jar文件。<< cmd， 进入build.xml目录， ant -buildfile build.xml thrift协议protocol： TBinaryProtocol：二进制格式 TCompactProtocol：高效压缩的二进制格式 TDenseProtocol:与TCompactProtocol相比，meta信息略有不同 TJSONProtocol JSON TDebugProtocol text 格式 方便调试 thrift传输层transport： TSocket 阻塞的io TFramedTransport 非阻塞io TFileTransport 可以将一组thrift请求写到文件中 TMemoryTransport 使用内存 I/O TZlibTransport 使用zlib压缩 支持的server TSimpleServer 单线程 阻塞 TThreadPoolServer 多线程 阻塞 TNonblockingServer 多线程 非阻塞 THsHaServer api说是TNonblockingServer的扩展，半同步半异步 可定义的数据类型： 基本类型： bool：布尔值，true 或 false，对应 Java 的 boolean byte：8 位有符号整数，对应 Java 的 byte i16：16 位有符号整数，对应 Java 的 short i32：32 位有符号整数，对应 Java 的 int i64：64 位有符号整数，对应 Java 的 long double：64 位浮点数，对应 Java 的 double string：未知编码文本或二进制字符串，对应 Java 的 String 结构体类型： struct：定义公共的对象，类似于 C 语言中的结构体定义，在 Java 中是一个 JavaBean 容器类型： list：对应 Java 的 ArrayList set：对应 Java 的 HashSet map：对应 Java 的 HashMap 异常类型： exception：对应 Java 的 Exception 服务类型： service：对应服务的类
vs编译idl文件_使 ThriftPy 编译器支持递归定义
weixin_39740419的博客
12-07 141
ThriftPy 是由饿了么开源的 Apache Thrift 纯 Python 实现。它在基本兼容 Apache Thrift 的同时相比 Apache 社区的实现有以下优势：Apache Thrift 由 C++ 渲染 Python 模板代码实现，因此需要在更新 Thrift IDL 文件后重新生成模板代码；而 ThriftPy 充分利用了 Python 元编程的优势，可以做到在程序的运行时构...
Thrift之TProtocol类体系原理及源码详细解析之紧凑协议类TCompactProtocolT（TCompactProtocol）...
星.云计算
06-11 206
我的新浪微博：http://weibo.com/freshairbrucewoo。 欢迎大家相互交流，共同提高技术。 这个协议类采用了zigzag编码，这种编码是基于Variable-lengthquantity编码提出来的，因为Variable-lengthquantity编码对于负数的编码都需要很长的字节数，而zigzag编码对于绝对值小的数字，无论正负都可以采用较少的字...
Thrift之TProtocol类体系原理及源码详细解析之JSon协议类TJSONProtocol
BruceWoo的专栏
06-13 2587
我的新浪微博：http://weibo.com/freshairbrucewoo。 欢迎大家相互交流，共同提高技术。 JSON (JavaScript Object Notation)是一种数据交换格式，是以JavaScript为基础的数据表示语言，是在以下两种数据结构的基础上来定义基本的数据描述格式的：1) 含有名称/值对的集合；2) 一个有序的列表。对于 JSON，其部分数据结
thrift源码
11-16
thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码thrift源码...
基于Scala的Spark Thrift Server设计源码
最新发布
04-03
本设计源码提供了一个基于Scala的Spark Thrift Server。项目包含12731个文件，主要使用Scala、Java、Python、Shell、JavaScript、CSS、HTML、Ruby和C编程语言。文件类型包括3539个Scala源代码文件、1559个Q文件、...
【Thrift之C++远程调用helloworld菜鸟教程】
12-23
【Thrift之C++远程调用helloworld菜鸟教程】
使用wireshark抓取thrift协议接口调用
07-22
使用wireshark抓取thrift协议接口调用
Thrift之C++初体验
09-29
thrift是一个软件框架，用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎，以构建在 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node.js, ...
thrift之TTransport层的堵塞的套接字I/O传输类TSocket
热门推荐
BruceWoo的专栏
07-25 1万+
本节将介绍第一个实现具体传输功能的类TSocket，这个类是基于TCP socket实现TTransport的接口。下面具体介绍这个类的相关函数功能实现。 　　1.构造函数 　　分析一个类的功能首先看它的定义和构造函数实现，先看看它的定义： 　　class TSocket : public TVirtualTransport { ......} 　　由定义可以看书TSocket继承至虚拟传
Thrift之代码生成器Compiler原理及源码详细解析1
BruceWoo的专栏
04-23 1万+
我的新浪微博：http://weibo.com/freshairbrucewoo。 欢迎大家相互交流，共同提高技术。 又很久没有写博客了，最近忙着研究GlusterFS，本来周末打算写几篇博客的，但是由于调试GlusterFS的一些新增功能就用了整整的一天，还有一天就陪老婆大人逛街去了！今晚浏览完微博发现时间还早就来博客一篇，本篇博客内容主要是前一段时间研究的Thrift的代码生成器的
thrift之TTransport层的分帧传输类TFramedTransport
BruceWoo的专栏
07-31 8170
帧传输类就是按照一帧的固定大小来传输数据，所有的写操作首先都是在内存中完成的直到调用了flush操作，然后传输节点在flush操作之后将所有数据根据数据的有效载荷写入数据的长度的二进制块发送出去，允许在接收的另一端按照固定的长度来读取。 　　帧传输类同样还是从缓存基类TBufferBase继承而来，实现的接口当然也基本相同，只是实现的方式不同而已，下面就来看看具体的实现过程和原理。 　　这个类
thrift之TTransport层的缓存传输类TBufferedTransport和缓冲基类TBufferBase
BruceWoo的专栏
07-26 6886
本节主要介绍缓冲相关的传输类，缓存的作用就是为了提高读写的效率。Thrift在实现缓存传输的时候首先建立一个缓存的基类，然后需要实现缓存功能的类都可以直接从这个基类继承。下面就详细分析这个基类以及一个具体的实现类。　　缓存基类TBufferBase　　缓存基类就是让传输类所有的读写函数都提供缓存来提高性能。它在通常情况下采用memcpy来设计和实现快路径的读写访问操作，这些操作函数通常都是小、非
Thrift之TProtocol类体系原理及源码详细解析之二进制协议类TBinaryProtocolT（TBinaryProtocol）
BruceWoo的专栏
06-05 5949
我的新浪微博：http://weibo.com/freshairbrucewoo。 欢迎大家相互交流，共同提高技术。 这个协议是Thrift支持的默认二进制协议，它以二进制的格式写所有的数据，基本上直接发送原始数据。因为它直接从TVirtualProtocol类继承，而且是一个模板类。它的模板参数就是一个封装具体传输发送的类，这个类才是真正实现数据传输的。这个类的定义上一节举例已经
thrift之TTransport层的内存缓存传输类TMemoryBuffer
BruceWoo的专栏
08-01 4947
内存缓存是简单的在内存进行读写操作的一种传输，任何时候想在上面写入数据都是放入缓存中，任何时候读操作数据也是来至于缓存。内存缓存的分配使用c语言的malloc类函数，分配的长度是需要长度的两倍，需要考虑这些内存缓存的使用范围。 同样这个类继承至缓存基类TBufferBase，默认的缓存大小是1024（static const uint32_t defaultSize = 1024;），所有的构造
Facebook之Thrift简介
BruceWoo的专栏
01-11 4167
我的新浪微博：http://weibo.com/freshairbrucewoo。 欢迎大家相互交流，共同提高技术。        以下内容是从网上各处简单整理而来，因为前段时间自己一直在研究Thrift，把研究的一点资料分享给需要的同行中人！ 第一节 RPC技术及实现简介 首先思考一下分布式系统中的 RPC (Remote Procedure Call) 问题，一个完整的 RPC 模块
thrift之TServer类体系原理及源码详细解析之服务器基类TServer
BruceWoo的专栏
08-13 4041
这一部分主要实现了底层IO通信，还涉及到通信服务器的堵塞、非堵塞、单线程、多线程等运行模式，所以实现比较复杂。这一部分涉及到的类的关系图如下： 由上面的类关系图可以看出，这一部分的类关系比较复杂，复杂的不是继承关系，而是相互之间的依赖关系。因为服务器需要处理很多的任务，也需要处理多个客户端的连接，这就涉及到多线程编程以及多线程之间通信及并发的情况。这一部分涉及到的并发编程的类容将在后
thrift源码解析
09-13
Thrift源码解析是通过分析Thrift框架的源代码来了解其内部工作原理和实现细节的过程。在这个过程中，我们可以深入了解Thrift框架中各个模块的功能和相互关系，以及具体的实现方式。 引用中提到了一篇博客文章...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

蔷薇理想人生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值