tidb ansible setup

最新推荐文章于 2022-03-20 22:56:02 发布
最新推荐文章于 2022-03-20 22:56:02 发布
阅读量634 收藏
点赞数
分类专栏： # tidb setup 文章标签： tidb ansible
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ctypyb2002/article/details/101291655
版权

os: centos 7.4
db: tidb

TiDB 是 PingCAP 公司的 newsql 数据库产品.是 Google Spanner/F1 的具体实现.架构非常好.
TiDB 集群的三个组件（tidb-server、tikv-server、pd-server）,具体可以参考公司的文档页面: https://pingcap.com/docs-cn/overview/

生产环境的部署要严格遵守 TiDB 的部署文档。

本文介绍的是 TiDB 基于 ansible 的部署(本地虚拟机再次验证).

ip 规划,6台机器

192.168.56.98   nodepdtidb1
192.168.56.99	nodepdtidb2
192.168.56.100  nodepdtidb3

192.168.56.101	nodetikv1
192.168.56.102	nodetikv2
192.168.56.102	nodetikv3

nodepdtidb1 节点部署 pd tidb 实例
nodepdtidb2 节点部署 pd tidb 实例
nodepdtidb3 节点部署 pd tidb 实例
nodetikv1 节点部署部署一个 tikv 实例
nodetikv2 节点部署部署一个 tikv 实例
nodetikv3 节点部署部署一个 tikv 实例

nodepdtidb1 节点充当 中控机，开通外网访问权限

中控机 os 设置

root 用户登录中控机,安装依赖包

# yum install -y epel-release git curl sshpass python2-pip \
python python-devel fontconfig open-sans-fonts \
ntp ntpdate 

# systemctl start ntpd.service;
systemctl enable ntpd.service

root 用户登录中控机,执行以下命令

# groupadd -g 10000 tidb;
useradd -m -d /home/tidb -g tidb tidb;

# passwd tidb

root 用户登录中控机,配置 tidb sudoer

# vi /etc/sudoers

tidb ALL=(ALL:ALL) NOPASSWD:ALL


# su - tidb
$ ssh-keygen -t rsa

中控机下载 TiDB Ansible

下载 tidb-ansible

# su - tidb
$ git clone https://github.com/pingcap/tidb-ansible.git

$ cd /home/tidb/tidb-ansible;
sudo pip install -r ./requirements.txt;

$ ansible --version
ansible 2.7.11
  config file = /home/tidb/tidb-ansible/ansible.cfg
  configured module search path = [u'/home/tidb/.ansible/plugins/modules', u'/usr/share/ansible/plugins/modules']
  ansible python module location = /usr/lib/python2.7/site-packages/ansible
  executable location = /bin/ansible
  python version = 2.7.5 (default, Aug  7 2019, 00:51:29) [GCC 4.8.5 20150623 (Red Hat 4.8.5-39)]

中控机配置部署机器 ssh 互信及 sudo 规则

# su - tidb
$ cd /home/tidb/tidb-ansible;
$ vi hosts.ini

[servers]
192.168.56.98
192.168.56.99
192.168.56.100
192.168.56.101
192.168.56.102
192.168.56.102

[all:vars]
username = tidb
ntp_server = pool.ntp.org

配置部署机器 ssh 互信及 sudo 规则

$ ansible-playbook -i hosts.ini create_users.yml -u root -k

当然也可以手工在各个节点创建 ssh ，配置ssh，修改 sudo 规则。

中控机配置部署目标机器上安装 NTP 服务

# su - tidb
$ cd /home/tidb/tidb-ansible;
ansible-playbook -i hosts.ini deploy_ntp.yml -u tidb -b;

部署目标机器上配置 CPUfreq 调节器模式

所有节点都需要设置。
为了让 CPU 发挥最大性能，请将 CPUfreq 调节器模式设置为 performance 模式。
查看 CPU 支持的模式

# cpupower frequency-info --governors

如果返回如下，

analyzing CPU 0:
  available cpufreq governors: performance powersave

如果返回如下，则跳过这一步骤

analyzing CPU 0:
  available cpufreq governors: Not Available

查看当前设置

# cpupower frequency-info --policy

设置为 performance 模式

# cpupower frequency-set --governor performance

批量查看

$ cd /home/tidb/tidb-ansible;
ansible -i hosts.ini all -m shell -a "cpupower frequency-info --governors" -u tidb -b

批量修改

$ cd /home/tidb/tidb-ansible;
ansible -i hosts.ini all -m shell -a "cpupower frequency-set --governor performance" -u tidb -b

部署目标机器上添加数据盘 ext4 文件系统挂载参数

参考官方文档

分配机器资源

编辑 inventory.ini 文件

# su - tidb
$ cd /home/tidb/tidb-ansible;
$ vi inventory.ini

## TiDB Cluster Part
[tidb_servers]
192.168.56.98
192.168.56.99
192.168.56.100

[tikv_servers]
192.168.56.101
192.168.56.102
192.168.56.103

[pd_servers]
192.168.56.98
192.168.56.99
192.168.56.100

## Monitoring Part
# prometheus and pushgateway servers
[monitoring_servers]
192.168.56.99

[grafana_servers]
192.168.56.99

# node_exporter and blackbox_exporter servers
[monitored_servers]
192.168.56.98
192.168.56.99
192.168.56.100
192.168.56.101
192.168.56.102
192.168.56.103

[alertmanager_servers]
192.168.56.99

部署任务

确认配置
确认 tidb-ansible/inventory.ini 文件中 ansible_user = tidb

## Connection
# ssh via normal user
ansible_user = tidb

确认 ssh 互信设置成功

# su - tidb
$ ansible -i inventory.ini all -m shell -a 'whoami'

确认 sudo 免密设置成功

$ ansible -i inventory.ini all -m shell -a 'whoami' -b

执行 local_prepare.yml playbook，联网下载 TiDB binary 到中控机

$ ansible-playbook local_prepare.yml

初始化系统环境，修改内核参数

$ ansible-playbook bootstrap.yml

如果有校验出错的，都会报错，如下为内存设置的不够大，提示的错误

TASK [check_system_optional : Preflight check - Check TiDB server's RAM] **************************************************************************
fatal: [192.168.56.99]: FAILED! => changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.
fatal: [192.168.56.98]: FAILED! => changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.
fatal: [192.168.56.100]: FAILED! => changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.


NO MORE HOSTS LEFT ********************************************************************************************************************************
	to retry, use: --limit @/home/tidb/tidb-ansible/retry_files/bootstrap.retry

PLAY RECAP ****************************************************************************************************************************************
192.168.56.100             : ok=32   changed=9    unreachable=0    failed=1   
192.168.56.101             : ok=32   changed=9    unreachable=0    failed=0   
192.168.56.102             : ok=32   changed=9    unreachable=0    failed=0   
192.168.56.103             : ok=32   changed=9    unreachable=0    failed=0   
192.168.56.98              : ok=32   changed=9    unreachable=0    failed=1   
192.168.56.99              : ok=32   changed=9    unreachable=0    failed=1   
localhost                  : ok=7    changed=4    unreachable=0    failed=0   


ERROR MESSAGE SUMMARY *****************************************************************************************************************************
[192.168.56.99]: Ansible Failed! ==>
  changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.

[192.168.56.98]: Ansible Failed! ==>
  changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.

[192.168.56.100]: Ansible Failed! ==>
  changed=false 
  msg: This machine does not have sufficient RAM to run TiDB, at least 16000 MB.

Ask TiDB User Group for help:
It seems that you have encountered some problem. Please describe your operation steps and provide error information as much as possible on https://asktug.com (in Chinese) or https://stackoverflow.com/questions/tagged/tidb (in English). We will do our best to help solve your problem. Thanks. :-)

通过之后就可以部署
部署 TiDB 集群软件

$ ansible-playbook deploy.yml

启动 TiDB 集群

$ ansible-playbook start.yml

验证 TiDB 集群

使用 MySQL 客户端连接测试，TCP 4000 端口是 TiDB 服务默认端口。

$ mysql -u root -h 172.16.10.1 -P 4000

通过浏览器访问监控平台。

地址：http://192.168.56.99:3000 默认帐号密码是：admin/admin

参考:
https://pingcap.com/docs-cn/dev/how-to/deploy/hardware-recommendations/
https://pingcap.com/docs-cn/dev/how-to/deploy/orchestrated/ansible/

数据库人生
关注
专栏目录
TiDB 学习第 3 天：TIDB 正式环境 TiDB-Ansible 部署
坚强的小土豆
11-25 841
对于生产环境，须使用 TiDB-Ansible 部署 TiDB 集群。Ansible 是一款自动化运维工具，TiDB-Ansible 是 PingCAP 基于 Ansible playbook 功能编写的集群部署工具。本文档介绍如何使用 TiDB-Ansible 部署一个完整的 TiDB 集群。 一、搭建集群前提准备 生产环境中搭建会有硬件检验，最适合的硬件是SSD（固盘） 时间同步 需要严格按...
搭建TiDB分布式数据库常见问题
Commander
12-08 2537
问题1 [tikv_servers]: Ansible UNREACHABLE! => playbook: bootstrap.yml; TASK: pre-ansible : disk space check - fail when disk is full; message: {"changed": false, "msg": "Failed to connect to the host...
使用 Ansible 安装部署 TiDB
weixin_34293246的博客
06-09 190
背景知识 TiDB 作为一个分布式数据库，在多个节点分别配置安装服务会相当繁琐，为了简化操作以及方便管理，使用自动化工具来批量部署成为了一个很好的选择。 Ansible 是基于 Python 研发的自动化运维工具，糅合了众多老牌运维工具的优点实现了批量操作系统配置、批量程序的部署、批量运行命令等功能，而且使用简单，仅需在管理工作站上安装 ...
TiDB Ansible 部署方案
drrui520的博客
03-29 409
概述 Ansible 是一款自动化运维工具，TiDB-Ansible 是 PingCAP 基于 Ansible playbook 功能编写的集群部署工具。本文档介绍如何使用 TiDB-Ansible 部署一个完整的 TiDB 集群。 本部署工具可以通过配置文件设置集群拓扑，完成以下各项运维工作： 初始化操作系统参数 部署 TiDB 集群（包括 PD、TiDB、TiKV 等组件和监控组件） 启动集群...
TiDB DM工具通过ansible 部署实战
vkingnew 的技术博客
03-04 631
1.安装依赖的软件包: # yum -y install epel-release git curl sshpass python-pip 2. # useradd -m -d /home/tidb tidb # passwd tidb # visudo tidb ALL=(ALL) NOPASSWD: ALL # su - tidb $$ ssh-keygen -t rsa Gener...
TiDB Ansible 使用指南
TiDB 社区干货传送门
04-14 165
作者：张鱼小丸子-PingCAP 原文来源： https://tidb.net/blog/81af442e ...
tidb-ansible
05-14
TiDB的Ansible Playbook已被 （一种管理TiDB集群的强大工具）所取代。 这个项目。 所有开发/维护活动都已停止。 由于它是免费软件，因此人们可以自由使用，并欢迎自己开发代码库。 但是，为避免混淆，将原始存储...
tidb-ansible.rar
02-12
TiDB Ansible 是一个自动化部署和管理 TiDB 集群的工具，它极大地简化了在各种环境下的 TiDB 集群安装和运维过程。TiDB 是一款分布式 NewSQL 数据库，支持 HTAP（混合事务/分析处理）场景，具有强一致性和高可用性，...
Ansible部署TiDB集群
Lockey23的博客
10-17 2466
Ansible部署TiDB集群
TiDB-ansible 安装部署步骤解析
deng940924的博客
06-18 438
本文章主要是熟悉 ansible-playbook 的主要过程 根据 ansible-playbook 配置文件中写到，安装好 tidb 的集群，也需要安装grafana 以及prometheus 1.local_prepare.yml --- - name: do local preparation hosts: localhost connection...
高楼的性能工程实战课-011-打开首页--一个案例带你搞懂硬件设施的性能问题
steven的博客
08-27 2707
打开首页--一个案例带你搞懂硬件设施的性能 1. 看架构图：如果有工具直接展示更好，如果没有工具，建议我们画一画，方便以后分析，不要自信认为自己能记住框架的所有组件。 2. 顺便看下代码逻辑，从代码中查看这个接口实现的逻辑，在做哪些动作，以及后续的链路。 3. 确定压力数据： 这里我们就要思考一下了：如果想要执行一个场景，并且这个场景可以压出打开首页接口的最大 TPS，我们应该怎么设置压力工具中的线程数、递增策略和持续执行策略呢？ 可以先拿10个线程试运行一下，一个线程最大达到 TPS ...
Ansible 使用roles安装服务
weixin_33827590的博客
10-31 209
创建所需要的目录[root@HA2nginx]#mkdir/etc/ansible/roles/nginx/{files,handlers,meta,vars,tasks,templates,default}-pv新建tasks任务[root@HA2nginx]#cd/etc/ansible/roles/nginx///进入nginx的roles目录[roo...
OpenStack单节点网络设置
weixin_30587025的博客
01-18 436
一、上传镜像文件 1、上传镜像 2、检索镜像 二、创建网络 1、创建内部网络 2、创建外部网络 3、创建内部网络子网 设置DHCP分配地址池，点击已创建 4、创建外部网络子网 注意：外部网络与仅主机（eth1）网卡网段一致 设置DHCP分配地址池，地址范围为192.168.200.2~192.168.200.254 三、配...
openstack 之 kolla安装镜像
weixin_34232363的博客
02-01 502
上面左边是我的个人微信，如需进一步沟通，请加微信。 右边是我的公众号“Openstack私有云”，如有兴趣，请关注。Openstack的一大问题是安装问题，自从有了kolla之后，安装难度向前迈进了一大步，但是由于国内访问openstack相关安装源的速度原因，以及版本稳定性的原因，给真正落地造成了很大的障碍。能不能再简单一点，就像VMWare的ESXI一样，下载一个...
Ansible详解（十七）——Ansible性能调优
永远是少年
03-20 2926
今天继续给大家介绍Linux运维相关知识，本文主要内容是Ansible的性能调优。 一、Ansible调优详解 二、Ansible SSH链接调优 （一）SSH关闭密钥检测 （二）OpenSSH链接优化 （三）SSH pipelining链接加速 三、Ansible Facts调优 （一）关闭Gather Facts （二）将Facts信息存入Redis缓存
TiDB Ansible 部署方案（生产数据库部署方案）
astra_zhao的专栏
11-08 2149
经过一段时间的搜索，了解到pingcap建议Tidb的集群生产环境使用Ansible去部署，所以这篇文章纯摘抄，不是原创，具体如下： 概述 Ansible 是一款自动化运维工具，TiDB-Ansible 是 PingCAP 基于 Ansible playbook 功能编写的集群部署工具。本文档介绍如何使用 TiDB-Ansible 部署一个完整的 TiDB 集群。 本部署工具可以通过配置文件...
CPU频率调节模式以及降频方法简介
热门推荐
bindingfly的博客
03-12 1万+
在kernel中实现了两个driver，一个负责控制开关CPU的核数，叫做hot-plug驱动，另一个负责调整CPU的频率，叫做DVFS驱动。kernel中的driver会根据系统的负载，自动调整使用几个CPU和调整CPU频率。如果负载高了，提高频率，或者多开几个核，或者开大核。如果负载降下去了，就可以关大核，关核，降频。以下是两个知名手机厂商开源的config配置文档：60 CONFIG_CPU...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

数据库人生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值