(WJW)etcd v3 集群最佳操作指南

最新推荐文章于 2020-10-04 19:26:14 发布
最新推荐文章于 2020-10-04 19:26:14 发布
阅读量524 收藏 1
点赞数
原文链接：https://my.oschina.net/wstone/blog/884602
版权

(WJW)etcd v3 集群最佳操作指南

etcd参数简单解释

--name                         #etcd集群中的节点名,这里可以随意,可区分且不重复就行  
--initial-cluster-token        #节点的token值,设置该值后集群将生成唯一id,并为每个节点也生成唯一id,当使用相同配置文件再启动一个集群时,只要该token值不一样,etcd集群就不会相互影响.
--initial-cluster              #集群自举时的url
--initial-advertise-peer-urls  #建议用于节点之间通信的url,节点间将以该值进行通信.
--listen-peer-urls             #监听的用于节点之间通信的url,可监听多个,集群内部将通过这些url进行数据交互(如选举,数据同步等)
--listen-client-urls           #监听的用于客户端通信的url,同样可以监听多个.
--advertise-client-urls        #建议使用的客户端通信url,该值用于etcd代理或etcd成员与etcd节点通信.

etcd所在目录解释

/opt/app                                 #etcd的根目录
/opt/app/etcd/create_etcd_first_node.sh #初始化集群时,第一个节点首次执行的脚本
/opt/app/etcd/run_etcd.sh  #以后正常启动的脚本

/opt/app/etcd/bin/etcd     #etcd的server程序
/opt/app/etcd/bin/etcdctl  #etcd的管理程序

/opt/app/etcd/data/        #etcd的数据目录

初始化第一个节点

export NODE_IP="192.168.68.17"
export ETCD_INITIAL_CLUSTER_TOKEN="token-01"
export ETCD_NAME="node1"
export ETCD_DATA_DIR="/opt/app/etcd/data"
/opt/app/etcd/bin/etcd \
    --initial-cluster-token "${ETCD_INITIAL_CLUSTER_TOKEN}" --initial-cluster "${ETCD_NAME}=http://${NODE_IP}:2380" \
    --initial-advertise-peer-urls "http://${NODE_IP}:2380" \
    --listen-peer-urls="http://${NODE_IP}:2380" \
    --listen-client-urls "http://${NODE_IP}:2379" \
    --advertise-client-urls "http://${NODE_IP}:2379"

根据实际情况替换变量NODE_IP,ETCD_INITIAL_CLUSTER_TOKEN,ETCD_NAME

查看到当前集群

/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379"  member list

检查集群健康状态

/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" cluster-health

停止第一个节点pkill etcd,然后使用/opt/app/etcd/run_etcd.sh脚本正常启动第一个节点的etcd

向集群中添加一台机器

登录需要加入到集群的那个节点机器

  1. 先执行etcdctl命令把节点加入集群
export NODE_IP="192.168.68.18"
export ETCD_NAME="node2"
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" member add ${ETCD_NAME} http://${NODE_IP}:2380

根据实际情况替换变量NODE_IP,ETCD_NAME
然后根据屏幕提示把环境变量保存下来:ETCD_NAME,ETCD_INITIAL_CLUSTER,ETCD_INITIAL_CLUSTER_STATE

  1. 启动新加入的节点
export NODE_IP="192.168.68.18"
export ETCD_NAME="node2"
export ETCD_DATA_DIR="/opt/app/etcd/data"
export ETCD_INITIAL_CLUSTER="node1=http://192.168.68.17:2380,node2=http://192.168.68.18:2380"
export ETCD_INITIAL_CLUSTER_STATE="existing"
/opt/app/etcd/bin/etcd \
    --initial-advertise-peer-urls "http://${NODE_IP}:2380" \
    --listen-peer-urls="http://${NODE_IP}:2380" \
    --listen-client-urls "http://${NODE_IP}:2379" \
    --advertise-client-urls "http://${NODE_IP}:2379"

注意: ETCD_NAME,ETCD_INITIAL_CLUSTER,ETCD_INITIAL_CLUSTER_STATE必须使用上面的etcdctl member add命令产生的输出! 根据实际情况替换变量NODE_IP,ETCD_NAME

  1. 检查集群正常后,停止新加入的节点pkill etcd,然后执行/opt/app/etcd/run_etcd.sh命令正常启动新加入的节点,再次检查集群状态! 以下是/opt/app/etcd/run_etcd.sh文件内容
#! /bin/sh

basedir=`dirname $0`
echo "BASE DIR:$basedir"
cd $basedir

export NODE_IP="192.168.68.18"
export ETCD_NAME="node2"
export ETCD_DATA_DIR="/opt/app/etcd/data"
/opt/app/etcd/bin/etcd \
    --initial-advertise-peer-urls "http://${NODE_IP}:2380" \
    --listen-peer-urls="http://${NODE_IP}:2380" \
    --listen-client-urls "http://${NODE_IP}:2379" \
    --advertise-client-urls "http://${NODE_IP}:2379"

注意根据实际情况替换变量NODE_IP,ETCD_NAME

附录:

运行阶段member异常恢复

假设一个节点node2异常重启,可以执行/opt/app/etcd/run_etcd.sh脚本命令正常起来

测试读写数据

/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" set /message hello
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" get /message

移除节点

/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" member remove ${NODE_ID}

${NODE_ID}可以从/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" member list的输出来查找!

节点迁移和替换

当你节点所在的机器出现硬件故障,或者节点出现如数据目录损坏等问题,导致节点永久性的不可恢复时,就需要对节点进行迁移或者替换.当一个节点失效以后,必须尽快修复,因为etcd集群正常运行的必要条件是集群中多数节点都正常工作.
迁移一个节点需要进行四步操作:

  • 暂停正在运行着的节点程序进程
  • 把数据目录从现有机器拷贝到新机器
  • 使用api更新etcd中对应节点指向机器的url记录更新为新机器的ip
  • 使用同样的配置项和数据目录,在新的机器上启动etcd.
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" member update ${NODE_ID} ${LISTEN_PEER_URLS}

${NODE_ID}可以从/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" member list的输出来查找!

集群损坏后,强制性重启集群

当集群超过半数的节点都失效时,就需要通过手动的方式,强制性让某个节点以自己为Leader,利用原有数据启动一个新集群.
此时你需要进行一下操作.

1. 备份原有数据到新机器.

export ETCD_DATA_DIR="/opt/app/etcd/data"
/opt/app/etcd/bin/etcdctl \
      backup \
      --data-dir "${ETCD_DATA_DIR}" \
      --backup-dir /tmp/etcd_backup

它首先将节点的源信息写入到备份区,但是节点的id,集群的id等将会被重写,这就意味着节点之前的集群信息就被抹掉.

2. 使用--force-new-cluster加备份的数据启动第一个节点

export NODE_IP="192.168.68.17"
export ETCD_INITIAL_CLUSTER_TOKEN="token-01"
export ETCD_NAME="node1"
export ETCD_DATA_DIR="/tmp/etcd_backup"
/opt/app/etcd/bin/etcd \
    --force-new-cluster \
    --initial-cluster-token "${ETCD_INITIAL_CLUSTER_TOKEN}" --initial-cluster "${ETCD_NAME}=http://${NODE_IP}:2380" \
    --initial-advertise-peer-urls "http://${NODE_IP}:2380" \
    --listen-peer-urls="http://${NODE_IP}:2380" \
    --listen-client-urls "http://${NODE_IP}:2379" \
    --advertise-client-urls "http://${NODE_IP}:2379"

注意:强制性重启是一个迫不得已的选择,它会破坏一致性协议保证的安全性(如果操作时集群中尚有其它节点在正常工作,就会出错),所以在操作前请务必要保存好数据.

3. 检查第一个节点运行正常后,停止etcd

pkill etcd

4. 使用/opt/app/etcd/create_etcd_first_node.sh脚本,启动第一个节点的etcd

5. 检查第一个节点运行正常后,再次停止etcd

pkill etcd

6. 使用/opt/app/etcd/run_etcd.sh脚本正常启动etcd

检查第一个节点是否运行正常!

7. 逐一按照新建集群的步骤,把新的节点加入到集群

开启访问控制

  1. auth enable 之前必须添加root用户,添加时设置密码:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" user add root
  1. 开启认证:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" auth enable
  1. 添加一个非特权账号:(注意,这时候就需要有权限的用户来操作了)
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root user add wjw
  1. 查看有哪些账号:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root user list
  1. 添加角色:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root role add test1
  1. 给角色添加能力:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root role grant --rw --path "/*" test1
  1. 查看有哪些角色了:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root role list
  1. 查看指定角色的权限:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root role get test1
  1. 将用户添加到角色:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root user grant --roles test1 wjw
  1. 查看用户拥有哪些角色:
/opt/app/etcd/bin/etcdctl --endpoints "http://192.168.68.17:2379" --username root:root user get wjw

转载于:https://my.oschina.net/wstone/blog/884602

weixin_33686714
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
二进制搭建Kubernetes集群（上）——部署etcd集群和单master
m0_73464307的博客
02-20 797
这篇文章开始介绍二进制搭建 Kubernetes v1.20，由于内容过多，分三篇介绍。目前Kubernetes最新版本是v1.24，但大部分公司一般不会使用最新版本，而是老版本中的v1.15，或者新版本的v1.18、v1.20，其中v1.16改变了很多API接口版本。
etcd v3命令和API
热门推荐
柳清风的专栏
05-12 4万+
etcd v3版本和以前的v2在使用和操作上面还是有些区别的，首先是命令区别其次是使用上面。先看命令行使用，我尽量用命令，不需要太多的文字描述，最大的区别莫过于ls命令没有了。创建、更新keyetcdctl put /test/ok 11 OKetcdctl put /test/ok 22 OK删除keyetcdctl del /test/gg 1 查询keyetcdctl get /test/o
etcd clientv3的基本使用
archer的技术故事
12-30 5010
本文主要介绍etcd 的clientv3的基本使用。在介绍之前，需要了解到的是v3版本的client和etcdctrl使用的是不通的存储空间，所以说不能通过etcdctl命令去访问client写入的数据，他们时间是存储隔离的。 好，下面上货。 package main import ( "context" "fmt" "github.com/google/uuid" "go....
etcd 二进制 集群搭建
yincheng_fans的博客
04-05 411
部署到3台主机的etcd集群，ip 10.4.7.10 =>etcd-10 10.4.7.11 =>etcd-11 10.4.7.12 =>etcd-12 使用部署到10.4.7.10 为例 下载到 /opt/目录下 https://github.com/etcd-io/etcd/releases/download/ 解压 tar -zxvf etcd-v3.3.18-...
etcd版本之v3
不务正业随手记
08-22 2303
概述 etcd v3存储的数据通过KV API对外暴露，并在API的层级支持mini事务。并且为了保证向后兼容，保留了etcd v2的协议与API。也就是说etcd v2和etcd v3本质上是共享一套Raft协议代码的，区别是API不同，存储不同，数据互相隔离。v2的数据只能通过v2的API访问，v3的数据只能通过v3的API访问。 etcd v2 到 etcd v3 etcd广泛应用到分布式网络，服务发现，配置中心，分布式系统调度和负载均衡领域。etcd专注于key-value存储而不是完整的数据库，
WJW_Protel99库
06-09
而"**WJW_Protel99库**"正是为 Protel99 提供的一套完整的封装库资源，包含了多种常用的PCB封装，极大地提高了设计效率。本文将深入探讨这个库的价值以及如何利用它来优化PCB设计流程。 1. **Protel99库概述** ...
网监王WJW110 专业级网站不良信息过滤系统
10-30
新一代智能双向高速过滤系统，网监王WJW110运行在IIS高效的内核层，采用独有的高速过滤算法，可保证在不影响网站运行效率的前提下实现不良信息的准确过滤和记录，网监王WJW110可对各种静态页面和动态页面实现完整...
HDS医疗大数据内容云方案与应用wjw201420.pptx
10-11
【HDS医疗大数据内容云方案】是针对当前医疗行业面临的大数据挑战提出的一种创新解决方案。随着信息化技术的快速发展，特别是移动医疗和医疗云计算的普及，医疗行业正经历着数据量的爆炸性增长。...
HDS医疗大数据内容云方案与应用-wjw201420.pptx
06-24
HDS医疗大数据内容云方案与应用-wjw201420.pptx
部署 etcd 3 节点集群
qq_35753140的博客
06-14 915
1. 准备csr文件 etcd-csr.json { "CN": "etcd", "hosts": [ "127.0.0.1", "192.168.220.121", "192.168.220.122", "192.168.220.123" ], "key": { "algo": "rsa", "size": 2048 }, "names": [ { "CN": "CN", "ST": "BeiJing"
etcd v3 集群——简单配置
weixin_33730836的博客
08-02 513
2019独角兽企业重金招聘Python工程师标准>>> ...
etcd集群部署
yjk13703623757的博客
01-06 7352
简介 Etcd是一个高可用的 Key/Value 存储系统，主要用于分享配置和服务发现。 ● 简单：支持 curl 方式的用户 API (HTTP+JSON) ● 安全：可选 SSL 客户端证书认证 ● 快速：单实例可达每秒1000次写操作 ● 可靠：使用 Raft 实现分布式环境： node IP OS etcd etcd0 10.1.2.61
安装etcd集群：自签证书
eyeofeagle的博客
09-29 3425
1, 生成证书 #ca机构配置：有效期10年 cat > ca-config.json <<EOF { "signing": { "default": { "expiry": "87600h" }, "profiles": { "www": { "expiry": "87600h", "usa...
test-definitions/blob/master/auto-test/etcd/etcd.sh
jason的笔记
01-19 401
#!/bin/bash #回显执行的命令和参数 set -x #cd到目录执行脚本，然后通过cd - 返回到当前目录 cd ../../utils . ./sys_info.sh . ./sh-test-lib cd - #根据不同的发行版安装repo case "${distro}" in centos|fedora) sudo wget -O /etc/yum.repos.d/est
Kubernetes的etcd数据查看和迁移
weixin_34163553的博客
12-11 929
2019独角兽企业重金招聘Python工程师标准>>> ...
ETCD 命令集合
vito
05-07 1万+
ETCD 命令 存储: curl http://127.0.0.1:4001/v2/keys/testkey -XPUT -d value='testvalue' curl -s http://127.0.0.1:4001/v2/keys/message2 -XPUT -d value='hello etcd' -d ttl=5 获取: curl http://127....
etcd第二篇etcdctl详解
weixin_34378045的博客
08-16 2042
关于etcd的安装请参考etcd第一篇本篇主要讲解etcdctl命令使用查看集群状态etcdctl --write-out=table --endpoints=$ENDPOINTS endpoint status我们看到node2成为leader查看集群成员etcdctl --endpoints=$ENDPOINTS member list删除成员：MEMBER_ID=fa6333c794b010...
ETCD：查看集群的leader节点
feiger的专栏
11-12 8910
背景： etcd 如何查看 节点属性，比如， leader 还是 flower 环境： docker 化安装的 etcd集群 测试 获取 etcdurl etcdurl=`docker exec etcd ps -o args |grep -v ps |grep -v COMMAND |awk '{print $7}'` 2. curl获取节点信息 etcd 有一个接口可以获取leader...
etcd — 操作手册
烟云的计算
10-04 3380
目录 文章目录目录与 etcd 交互API 交互获取 etcd Server 的版本信息Put and get keysWatch keysTransactionsAuthentication 与 etcd 交互 etcd v3 API 使用 gRPC 协议。etcd 项目包括了一个基于 gRPC 的 Golang Client SDK 和一个指令行工具 etcdctl，用于通过 gRPC 协议与 etcd Cluster 进行通信。对于不支持 gRPC 的编程语言，etcd 还提供了一个 JSON gRP
:https://www.cnblogs.com/wjw1014/p/10138032.html
最新发布
04-11
好的，这篇博客是关于使用Python和BeautifulSoup库对网页进行解析和提取信息的教程。作者通过实例讲解了如何使用BeautifulSoup库分析HTML文档的结构，以及如何通过标签、类、属性等方式定位和提取所需的信息。同时还...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值