Memcached协议解析及Go语言客户端实现

前段时间在一个go语言项目中用到memcached,在githup找到github.com/bradfitz/gomemcach,beego的cache中也用的这个,但是发现它只能存储最终的bytes,需要自己做类型转换,用起来很不方便,而且通信协议用的是文本协议,不如二进制协议解析快,所以就自己写了一个,代码见:https://github.com/pangudashu/memcache

1、Memcached协议

memcached支持两种协议:文本协议、二进制协议

1.1 文本协议

1、数据以单字节ascii字符传输,解析时需要按分隔符切割,而且多字节数据类型需要进行文本转换,如string => int (“123” -> 123)
2、常见的用文本协议的有:http、ftp、redis等
3、文本协议的优点就是字段容易扩展,比如我们可以在http的header中定义自己的字段,缺点就是解析效率低,而且安全性低,容易被劫持

memached文本协议我们也经常用到,比如通过telnet连接使用就是最常见的,如Get命令:get \r\n

文本协议比较简单,这里不作过多说明,有兴趣的查下资料,这里我们具体说下二进制协议。

1.2 二进制协议

1、二进制协议是以二进制数据传输,比如8字节整形,传输的时候就是8byte的字节
2、这类协议应用最普遍了,协议栈基本都是,如:ip、tcp、fastcgi等等
3、与文本协议比二进制最大的特点就是解析快,不用对字符串进行处理,直接按长度读取、解析即可,所以效率非常高,而且相对比较安全,如果不知道具体的协议,很难从一堆二进制数据中分析出有用的信息,缺点就是不容易扩展,需要进行版本兼容

事实上memcached可以动态的支持这两种协议,也就是说客户端发送哪种协议都可以,这是怎么实现的呢?从memcached.c文件try_read_command函数中可以看到具体的处理:

//memcached-1.4.25
//memcached.c #3687 
if ((unsigned char)c->rbuf[0] == (unsigned char)PROTOCOL_BINARY_REQ) {
    c->protocol = binary_prot;
} else {
    c->protocol = ascii_prot;
}

从代码里看以看出是根据发送数据的第一个字节判断的,如

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
分布式缓存是一种将数据缓存在多台服务器中,以提供高性能和可伸缩性的技术。其原理是在应用服务器和数据库之间添加一个缓存层,存储经常被访问的数据,以减少对数据库的访问频率。通过将缓存数据存储在多台服务器上,可以实现数据的共享和负载均衡,从而提高系统的性能和可用性。 分布式缓存的架构主要由以下组件构成: 1. 客户应用:请求数据的应用程序。 2. 缓存层:存储数据的服务器集群,接收并缓存客户的请求。 3. 数据源:提供原始数据的数据库或其他数据存储系统。 4. 分布式缓存协议:用于客户和缓存层之间进行通信的协议,如Memcached协议或Redis协议。 在实现分布式缓存中,可以使用Go语言来开发缓存层服务器。Go语言具有高效的并发性和网络编程能力,适合构建分布式系统。 使用Go语言实现分布式缓存的步骤如下: 1. 设计缓存数据结构:确定缓存存储的数据结构和数据访问方法。 2. 实现缓存服务器:使用Go语言编写缓存服务器代码,包括处理客户请求、缓存数据的读写等功能。 3. 集群管理:实现监控和管理分布式缓存服务器,包括节点的添加和删除、负载均衡等功能。 4. 客户接口:为客户应用提供访问分布式缓存的接口,使其能够通过缓存层访问数据。 使用Go语言实现分布式缓存可以借助一些开源框架和库,如memcachedGoCache等,它们提供了丰富的功能和工具,简化了分布式缓存的开发和管理。 总之,分布式缓存通过在多台服务器上缓存数据,提供了高性能和可伸缩性,其原理是将缓存层插入应用服务器和数据源之间,通过共享和负载均衡来提高系统的性能。Go语言作为一种高效的编程语言,对于实现分布式缓存来说,具有很大的优势。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值