14、codis的安装

最新推荐文章于 2024-04-17 07:22:16 发布
最新推荐文章于 2024-04-17 07:22:16 发布
阅读量313 收藏
点赞数
分类专栏： 组件tar包安装
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wyl9527/article/details/72598109
版权
1.基本信息
版本 2.0
安装机器 三台机器
账号 hadoop
源路径 /opt/software/codis-2.0.tar.gz
目标路径 /opt/codis -> opt/codis-2.0
2.安装过程

1).使用hadoop账号解压到/opt/目录下：

[hadoop@bgs-5p173-wangwenting software]$ tar -zxvf codis-${version}.tar.gz -C /opt

设置软连接

[hadoop@bgs-5p173-wangwenting software]$ tar -zxvf codis.tar.gz -C /opt
[hadoop@bgs-5p173-wangwenting opt]$ ln -s codis-${version} codis

修改环境变量

[hadoop@bgs-5p173-wangwenting opt]$ vim /etc/profile
添加以下内容：
export GOROOT=/opt/codis/go
export PATH=${GOROOT}/bin:$PATH
export GOPATH=/opt/codis/codis

使环境变量生效：

[hadoop@bgs-5p173-wangwenting opt]$ source /etc/profile

2).编译

[hadoop@bgs-5p173-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ mv bin/redis* ../                           //把redis相关的conf文件移动到上一层，避免编译时被删除
注释bootstrap.sh文件中的go get开头的命令并编译:
[hadoop@bgs-5p173-wangwenting codis]$ ./bootstrap.sh                             //编译
[hadoop@bgs-5p173-wangwenting codis]$ mv ../redis*  bin/                         //移回redis相关的conf文件

3).修改config.ini:

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis
[hadoop@bgs-5p173-wangwenting codis]$ vim config.ini
coordinator=zookeeper
zk=172.24.5.173:2181,172.24.5.174:2181,172.24.5.175:2181
product=baseline
dashboard_addr=bgs-5p173-wangwenting:18087
proxy_id=proxy_01

4).修改redis6479.conf：

[hadoop@bgs-5p173-wangwenting codis]$ vim bin/redis6479.conf
pidfile "/opt/codis/codis/src/github.com/wandoulabs/codis/logs/redis6479.pid"
port 6479
bind 172.24.5.173
logfile "/opt/codis/codis/src/github.com/wandoulabs/codis/logs/redis6479.log"
dbfilename "dump6479.rdb"
appendfilename "appendonly6479.aof"
dir "/opt/codis/codis/src/github.com/wandoulabs/codis/data"

5).修改redis6480.conf：

[hadoop@bgs-5p173-wangwenting codis]$ vim bin/redis6480.conf
pidfile "/opt/codis/codis/src/github.com/wandoulabs/codis/logs/redis6480.pid"
port 6480
bind 172.24.5.173
logfile "/opt/codis/codis/src/github.com/wandoulabs/codis/logs/redis6480.log"
dbfilename "dump6480.rdb"
appendfilename "appendonly6480.aof"
dir "/opt/codis/codis/src/github.com/wandoulabs/codis/data"

6).复制到其它两台机器:

[hadoop@bgs-5p173-wangwenting codis]$ scp -r /opt/codis-${version} hadoop@bgs-5p174-wangwenting:/opt/
[hadoop@bgs-5p174-wangwenting opt]$ln -s codis-${version}0  codis
[hadoop@bgs-5p173-wangwenting codis]$ scp -r /opt/codis-${version} hadoop@bgs-5p175-wangwenting:/opt/
[hadoop@bgs-5p175-wangwenting opt]$ln -s codis-${version}  codis

7).分别在另外两台机器上修改config.ini:

[hadoop@bgs-5p174-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis
[hadoop@bgs-5p174-wangwenting opt]$ vim config.ini
proxy_id=proxy_02    //bgs-5p174-wangwenting上修改
  
[hadoop@bgs-5p175-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis
[hadoop@bgs-5p175-wangwenting opt]$ vim config.ini
proxy_id=proxy_03        //bgs-5p175-wangwenting上修改

8).在bgs-5p174-wangwenting机器上修改redis6481.conf和redis6482.conf：

[hadoop@bgs-5p174-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/bin
[hadoop@bgs-5p174-wangwenting opt]$ mv redis6479.conf redis6481.conf
[hadoop@bgs-5p174-wangwenting opt]$ mv redis6480.conf redis6482.conf
[hadoop@bgs-5p174-wangwenting opt]$ sed -i "s/6479/6481/g" /opt/codis/codis/src/github.com/wandoulabs/codis/bin/redis6481.conf
[hadoop@bgs-5p174-wangwenting opt]$ sed -i "s/6480/6482/g" /opt/codis/codis/src/github.com/wandoulabs/codis/bin/redis6482.conf
并分别修改bind字段为bgs-5p174-wangwenting
bind bgs-5p174-wangwenting

9).在bgs-5p175-wangwenting机器上修改redis6483.conf和redis6484.conf：

[hadoop@bgs-5p175-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/bin
[hadoop@bgs-5p175-wangwenting opt]$ mv redis6479.conf redis6483.conf
[hadoop@bgs-5p175-wangwenting opt]$ mv redis6480.conf redis6484.conf
[hadoop@bgs-5p175-wangwenting opt]$ sed -i "s/6479/6481/g" /opt/codis/codis/src/github.com/wandoulabs/codis/bin/redis6483.conf
[hadoop@bgs-5p175-wangwenting opt]$ sed -i "s/6480/6482/g" /opt/codis/codis/src/github.com/wandoulabs/codis/bin/redis6484.conf
并分别修改bind字段为bgs-5p175-wangwenting
bind bgs-5p175-wangwenting

10).在bgs-5p173-wangwenting机器上启动dashboard并初始化slots：

[hadoop@bgs-5p175-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p175-wangwenting codis]$ nohup bin/codis-config dashboard &
[hadoop@bgs-5p175-wangwenting codis]$ bin/codis-config slot init
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

11).分别在三台机器上启动Codis Redis：

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-server bin/redis6479.conf           //bgs-5p173-wangwenting上
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-server bin/redis6480.conf           //bgs-5p173-wangwenting上
[hadoop@bgs-5p174-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p174-wangwenting codis]$ bin/codis-server bin/redis6481.conf           //bgs-5p174-wangwenting上
[hadoop@bgs-5p174-wangwenting codis]$ bin/codis-server bin/redis6482.conf           //bgs-5p174-wangwenting上
[hadoop@bgs-5p175-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p175-wangwenting codis]$ bin/codis-server bin/redis6483.conf           //bgs-5p175-wangwenting上
[hadoop@bgs-5p175-wangwenting codis]$ bin/codis-server bin/redis6484.conf           //bgs-5p175-wangwenting上

12).bgs-5p173-wangwenting机器，分别添加 Redis Server Group：

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 1 172.24.5.173:6479 master 
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 1 172.24.5.173:6480 slave
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 2 172.24.5.174:6481 master 
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 2 172.24.5.174:6482 slave
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 3 172.24.5.175:6483 master 
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config server add 3 172.24.5.175:6484 slave
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

13).bgs-5p173-wangwenting机器，设置各个server group服务的slot范围(0-1024)：

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config slot range-set 0 340 1 online
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config slot range-set 341 700 2 online
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config slot range-set 701 1023 3 online
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

14).查看cpu core数目：

[hadoop@bgs-5p173-wangwenting codis]$ cat /proc/cpuinfo | grep "cpu cores"

15).三台机器分别启动 codis-proxy：

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ nohup bin/codis-proxy -c config.ini -L ./logs/proxy.log  --cpu=4 --addr=bgs-5p173-wangwenting:19000 --http-addr=bgs-5p173-wangwenting:11000 &  //这里的4为cpu数目
[hadoop@bgs-5p174-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p174-wangwenting codis]$ nohup bin/codis-proxy -c config.ini -L ./logs/proxy.log  --cpu=4 --addr=bgs-5p174-wangwenting:19000 --http-addr=bgs-5p174-wangwenting:11000 &  //这里的4为cpu数目
[hadoop@bgs-5p175-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p175-wangwenting codis]$ nohup bin/codis-proxy -c config.ini -L ./logs/proxy.log  --cpu=4 --addr=bgs-5p175-wangwenting:19000 --http-addr=bgs-5p175-wangwenting:11000 &  //这里的4为cpu数目

16).bgs-5p173-wangwenting上设置 proxy 为 online 状态,提供服务：

[hadoop@bgs-5p173-wangwenting codis]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting codis]$ bin/codis-config -c config.ini proxy online proxy_01
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

17).bgs-5p174-wangwenting上设置 proxy 为 online 状态,提供服务：

[hadoop@bgs-5p174-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p174-wangwenting opt]$ bin/codis-config -c config.ini proxy online proxy_02
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

18).bgs-5p175-wangwenting上设置 proxy 为 online 状态,提供服务：

[hadoop@bgs-5p175-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p175-wangwenting opt]$ bin/codis-config -c config.ini proxy online proxy_03
输出以下内容代表成功
{
  "msg": "OK",
  "ret": 0
}

19).启动 codis-ha：

[hadoop@bgs-5p173-wangwenting opt]$ cd /opt/codis/codis/src/github.com/wandoulabs/codis/
[hadoop@bgs-5p173-wangwenting opt]$ nohup /opt/codis/codis-ha/codis-ha --codis-config=172.24.5.173:18087 --productName=baseline &

20).打开浏览器，访问以下网址：172.24.5.173:18087

 

输出以上内容，所有proxy status都是online说明codis集群搭建成功

 
wyl9527
关注
专栏目录
基于Codis的Redis分布式缓存实现
路漫漫，水迢迢
05-03 8740
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有显著区别 , 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的一切事情, 对于前面的客户端来说是透明的, 可以简单的认为后边连接的是一个内存无限大的 Redis 服务。Codis不
Codis安装部署
williamforwork的专栏
09-21 1242
Codis安装部署Codis的官网推荐的安装部署方式是通过git获取master分支的代码然后进行编译部署，但是在实际的生产环境中很可能部署机是无法连接到外网到，也就不能使用git。本文将介绍如果将所需要到软件包事先下载好，然后通过非root用户进行安装部署。前期准备1.所需到安装包 Name Version go1.6.linux-amd64.tar.gz 1.6 godep_l
codis2.0安装
liaoyoujinb的专栏
10-31 752
参考 codis集群部署实战 codis安装与使用 一、安装（linux）1. 安装GO语言开发环境2. 安装zookeeper并启动3. Codis源码安装 GitHub上的官方安装指导是这样写的： “`bash [root@vm root]goget−dgithub.com/wandoulabs/codis[root@vmroot] g
Codis的安装与使用
热门推荐
猫爷大数据学习笔记
03-23 1万+
1背景 codis的github地址，里面很全，并且是中文的，但是按照他的步骤还是有些坑哈 https://github.com/CodisLabs/codiscodis是一种基于高可用的redis集群的一种带来，使用go语言编写。被广泛使用到豌豆荚和其他公司。 https://github.com/CodisLabs/codis/releases 可以下载各种版本 codis特点： 图形
Redis Codis 部署安装
weixin_30564785的博客
07-08 220
背景 关于Redis的高可用除了只身的Sentinel和Cluster之外，还有一个用的比较多的是Codis，由于公司的Redis大部分都使用Codis，本文就针对Codis进行相关的安装部署进行说明，来好好的认识Codis。 介绍 Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有显著区别 (...
codis3安装测试
weixin_30571465的博客
05-16 80
环境 机器： cld-tmp-ops-06集群方式： 伪集群依赖： java（zk）、go codis-dashboard：192.168.233.135:11080codis-fe：192.168.233.135:18090codis-proxy:192.168.233.135:19000，192.168.233.138:19000，192.168.233.139:19000redi...
Codis安装部署全架构
weixin_33720078的博客
07-25 463
Codis安装部署全架构Codis简介Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的一切事情, 对于前面的客户端来说是...
Codis安装与部署_codis安装教程，贼好用的Linux运维学习路线集合
最新发布
m0_60226911的博客
04-17 939
新增的集群 slot 状态是 offline，因此我们需要对它进行初始化（将 1024 个 slot 分配到各个 group），而初始化最快的方法可通过 fe 提供的 rebalance all slots 按钮来做，如下图所示，点击此按钮，我们即快速完成了一个集群的搭建。使用 codis-proxy-admin.sh 脚本启动 codis-proxy，并查看 proxy 日志确认启动是否有异常。使用 codis-fe-admin.sh 脚本启动 codis-fe，并查看 fe 日志确认启动是否有异常。
codis 长链接测试
不忘初心，方得始终
02-27 473
背景：2022-2-10日客户端cpu负载上升， codis proxy 主机的负载也跟随着上升 测试工具：memtier_benchmark redis压测工具 1.单proxy测试 （长连接）同网段 proxy 配置 (max cpu32、maxclient 100000 、offheap maxmemory 1024mb) https://github.com/RedisLabs/memtier_benchmark/archive/refs/heads/master...
Codis搭建详细攻略
InternalsOf
04-03 1758
codis搭建&迁移方案 1.1 codis迁移规格 ECS：测试实例3台32C128GB规格 REDIS：Redis 4.0—128G集群版16节点 1.2 codis-demo架构 zookeeper集群: 192.168.10.45 192.168.10.46 192.168.10.47 codis-config、codis-dashboard： 192.168.10.45:180...
mac上配置redis集群方案－－Codis的安装测试小结
Sanjay的专栏
09-05 5075
安装go首先按照golang，下载地址： https://golang.org/dl/，最新的1.4.2版本。 如果被墙使用golang中国下载： http://golangtc.com/download。 有mac版的apk，直接安装完事。 设置环境变量打开终端，输入sudo su ,化身炒鸡管理员，输入下面命令。export GOROOT=/usr/local/go export PATH
基于Codis的Redis分布式缓存
weixin_42167918的博客
08-12 907
下载与编译 下载release binary文件安装 如果是重要的生产环境使用，尽量不要选择alpha、rc版本。 根据自己的部署平台，选择相应的文件下载即可。 编译源码安装 1、安装 Go 运行环境 参考这里 安装完成后可以运行下列命令进行检测： $ go version go version go1.7.3 linux/amd64 2、 设置编译环境 注意 $GOPATH 是本机...
CODIS2.x集群 之 存储集群搭建全过程
做事先做人！
06-02 6151
Codis2.x存储集群搭建全过程
CODIS3 x集群 之 存储集群搭建全过程
qq_43667184的博客
11-13 2208
CODIS3 x集群 之 存储集群搭建全过程
neo4j的部署安装
wyl9527的博客
07-11 2575
官网地址：https://neo4j.com安装文档：https://neo4j.com/docs/operations-manual/current/installation/linux/官网下载地址：https://neo4j.com/download/#下载安装包 [root@wyl01 soft]# wget https://neo4j.com/artifact.php?name=neo4...
2、linux上离线安装python
wyl9527的博客
05-21 1820
1.基本信息 版本 2.7.5 安装机器 三台机器 账号 root 源路径 /opt/software/Python-2.7.5.tar.gz 目标路径 /opt/python -> /opt/Python-2.7.5 依赖关系 无 2.安装过程 1).使用root账号,将python包解压到/opt/目录下： [root@bgs-5p173-wang
ranger的安装
wyl9527的博客
05-21 1708
1.版本选型         ranger 目前大版本 主要是 0.4， 0.5 ， 0.6        0.4 版本  主要支持的hadoop 生态版本(Hadoop 2.6.0 — Hive 0.14.0  – Hbase 0.99.2)  （2015年2月 最后更新）        0.5 版本  主要支持的hadoop 生态版本(Hadoop 2.7.0 — Hive 1.2.0  –
1、linux上离线安装jdk
wyl9527的博客
05-21 1221
jdk的tar包安装文档
3.gcc-5.2.0离线安装
wyl9527的博客
05-21 1157
1）使用root账号，在opt目录下创建gcc目录，然后将gcc包解压到/opt/gcc目录下： [root@bgs-5p173-wangwenting opt]# mkdir gcc [root@bgs-5p173-wangwenting opt]# tar -xf /opt/software/gcc-${version}.tar.gz  /opt/gcc 2
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值