CODIS2.x原理 之 CODIS-PROXY实现原理

最新推荐文章于 2024-08-20 10:03:45 发布
最新推荐文章于 2024-08-20 10:03:45 发布
阅读量9.5k 收藏 3
点赞数 4
分类专栏： 源码剖析 设计思路 CODIS 文章标签： codis集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qifengzou/article/details/51934958
版权
CODIS-Proxy作为连接客户端与CODIS-Server的桥梁，处理客户端请求并分发到后端。主要流程包括接收客户端连接、请求分发、转发请求、接收应答。它支持命令拆分、处理迁移中的槽，并通过ZK事件处理集群状态变化。注意配置如session_max_timeout和session_max_pipeline对系统性能的影响。
摘要由CSDN通过智能技术生成

作者：邹祁峰
邮箱：Qifeng.zou.job@hotmail.com
博客：http://blog.csdn.net/qifengzou
日期：2016.08.02 18:48:39
转载请注明来自”祁峰”的CSDN博客

程序codis-proxy是连接client与codis-server之间的桥梁，且其主要处理流程充分体现了codis设计思想。要想深入理解codis原理，必须首先弄清楚codis-proxy各主要处理流程。

1 总体时序

Codis-proxy最主要的作用就是接收客户端提交的redis命令，并将命令分发到后端codis-server集群，再收集各命令的执行结果，最终将执行结果返回给客户端。其大体处理时序图如下：
这里写图片描述

功能简介：
1.客户端：Redis命令的发起方
2.SN-接收协程：用于接收来自客户端的请求
3.SN-发送协程：用于发送请求处理结果至客户端
4.BC-发送协程：用于将客户端的请求转发到后端某codis-server服务
5.BC-接收协程：用于接收来自某codis-server服务的应答
6.REDIS服务：某codis-server服务

2 处理流程

2.1 接收客户端连接

最低0.47元/天 解锁文章
祁峰
关注
专栏目录
Codis的原理以及部署—— CODIS （分布式 Redis 解决方案）
ymeng9527的博客
08-15 1万+
1.什么是Codis？ Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的一切事情, 对于前面的客户端来说是透明的, 可以简单的认为后边连接的是...
CODIS2.x原理 之 数据迁移流程
做事先做人！
08-03 4565
CODIS有一个非常重要的特点就是：支持热扩容。即：在不停止服务的情况下，实现集群设备的增减。其实现此功能的技术基础就是“数据迁移功能”。数据迁移的主要目的是将属于某codis-server组的slot的所有数据迁移到另外一个codis-server组中。
4000余字为你讲透Codis内部工作原理
个推技术学院
12-17 5196
一、引言 Codis是一个分布式 Redis 解决方案，可以管理数量巨大的Redis节点。个推作为专业的第三方推送服务商，多年来专注于为开发者提供高效稳定的消息推送服务。每天通过个推平台下发的消息数量可达百亿级别。基于个推推送业务对数据量、并发量以及速度的要求非常高，实践发现，单个Redis节点性能容易出现瓶颈，综合考虑各方面因素后，我们选择了Codis来更好地管理和使用Redis。 ...
XProxy代理服务器：高效、灵活的反向代理解决方案
最新发布
gitblog_01108的博客
08-20 282
XProxy代理服务器：高效、灵活的反向代理解决方案 XProxyXProxy是一个代理服务器，内置有NAT、反向代理、直接代理、间接代理等。项目地址:https://gitcode.com/gh_mirrors/xpr/XProxy 在当今的数字化时代，网络代理服务器扮演着至关重要的角色，它们不仅能够提高网络性能，还能增强安全性。今天，我们要介绍的是一款由新生命开发团队精心打造的开源项目——X...
Codis的原理以及部署
even160941的博客
08-14 643
文章目录下载与编译安装GO的运行环境设置编译环境 下载与编译 安装GO的运行环境 下载并解压go的压缩包。 [root@server1 ~]# tar zxf go1.8.linux-amd64.tar.gz [root@server1 ~]# mv go /usr/local/ 设置环境变量，查看go的版本。 [root@server1 src]# cat >> ~/.b...
codis原理及部署_01
a82831154的博客
09-14 390
一.codis介绍 Codis是一个分布式Redis解决方案,对于上层的应用来说,连接到Codis Proxy和连接原生的RedisServer没有明显的区别,有部分命令不支持 Codis底层会处理请求的转发,不停机的数据迁移等工作,所有后边的一切事情,对于前面的客户端来说是透明的,可以简单的认为后边连接的是一个内存无限大的Redis服务. Codis由四部分组成 Cod...
codis介绍
MyObject-C的专栏
12-13 3586
分片介绍 介绍codis前，先介绍下分片知识 分片(partitioning)就是将你的数据拆分到多个 Redis 实例的过程，这样每个实例将只包含所有键的子集。 分片能做什么 Redis 的分片承担着两个主要目标： 允许使用很多电脑的内存总和来支持更大的数据库。没有分片，你就被局限于单机能支持的内存容量。 允许伸缩计算能力到多核或多服务器，伸缩网络带宽到多服务器或多网络适配器。 分片...
codis-proxy
12-30
都已经完全编译好了，可以直接使用，只需要设置一个gopath
codis-proxy2,codis-server
12-30
只需要设置gopath,就可以直接使用，所有的依赖包都已经加到里面了
Codis-proxy的配置和启动
陈正的博客
08-29 2303

 生成配置文件，即将现有的配置文件输出到指定目录位置： ./codis-proxy --default-config | tee conf/proxy.toml 修改配置文件信息： vi conf/proxy.toml 如果当前目录下还没有创建logs文件夹，请先创建logs文件夹。 后台启动proxy： nohup ./codis-proxy --c...
Redis分布式集群实战（4）——redis集群之Codis讲解和搭建
CapejasmineY的博客
02-15 703
文章目录一、什么是LNMP？二、了解LNMP工作原理三、cgi（Common Gateway Interface、通用网关接口）四、什么是fast-cgi五、php-fpm（php-Fastcgi Process Manager）六、Nginx+FastCGI运行原理 一、什么是LNMP？ color=#00ffff LNMP代表的就是：Linux系统下Nginx+MySQL+PHP这种网站服务器...
【Codis源码】codis-proxy处理流程下（三）
c-rain
03-14 620
前言： 接着上一章讲，上一章讲了loopReader。这一块会延续上一章节继续往下讲。 golang版本： go1.13.5 darwin/amd64 codis版本：codis 3.2 调试工具：dlv codis源码： https://github.com/CodisLabs/codis/ （一）proxy处理流程 上一章中讲proxy流程时只讲了session连接部分，这一章把完整的流程串...
Codis 的设计与实现 Part 3
zeus_9i的专栏
03-14 1225
性能，HA (高可用)，运维等等 「对于一个设计良好的分布式系统来说，单机性能从来不是一个问题 」—— 我 第一篇文章就说了，Codis 采用了 Proxy 的方案，所以必然会带来单机性能的损失，经测试，在不开 pipeline 的情况下，大概会损失 40% 左右的性能，但是 Redis 本身是一个快得吓人的东西，即使单机损失了 40% 仍然是一个很大的数字。 另外一个比较好
Codis-proxy实现原理（Redis分布式解决方案1）
m0_50180963的博客
04-10 817
1.概述 前段时间分析了redis高可用的解决方案，本文主要是想介绍下redis的分布式解决方案。掌握了高可用和分布式，能更好的支撑业务的长久发展。redis的分布式方案有很多，本文主要介绍codis的实现。redis官方的cluster暂时没有兴趣观摩。 2.Redis分布式的问题 如何做数据分片 如何保证高可用 可扩展性（扩缩容问题） 数据分片后，对于一些多key操作的命令，如何做兼容 1.其实数据分片主要有两个方案，一个是一致性hash，另一个则是虚拟桶预分片。Redis采用的是后者，具体
codis proxy 配制
CAO的专栏
11-20 2476
http://download.oracle.com/otn-pub/java/jdk/8u65-b17/jdk-8u65-linux-x64.tar.gz http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz 修改环境变量为 vim /etc/profile  JAVA_HO
codis配置_redis集群方案之Codis-proxy变更
weixin_39770226的博客
12-19 425
简介codis-proxy 是 codis 集群的代理转发的应用，可以通过dashboard对codis-proxy进行操作，codis-proxy上不存储数据，数据都在zookeeper上，。增加 proxy如果集群设置了密码，需要对应修改的配置文件参数是 product_auth，集群名称 product_name 要一致。session_auth 是 proxy 节点的验证，可以跟其他密码不...
Redis分布式集群实战（六）——codis集群的搭建
ranrancc_的博客
02-15 751
文章目录一、Codis原理1、什么是Codis？2、Codis组成3、Codis的架构4、Codis的优缺点5、zookeeper二、codis集群的搭建部署 一、Codis原理 1、什么是Codis？ Codis 是一个 分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别(不支持的命令列表), 上层应用可以...
Codis proxy说明
霍城延的随笔
08-09 1397
# # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # Codis-Proxy # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # ...
Codis源码解析——proxy的启动
橙子wj的博客
07-17 4764
proxy启动的时候，首先检查输入的命令行，一般情况下，启动proxy的命令如下：nohup ./bin/codis-proxy --ncpu=2 --config=./conf/proxy.conf --log=./logs/proxy.log --log-level=WARN &程序会解析这行命令参数，下面举个例子（实例代码是cmd/proxy/main.go），有关于go的并行，这里要特别说明
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值