ClickHouse集群安装（rpm安装）

最新推荐文章于 2023-05-11 10:53:53 发布
最新推荐文章于 2023-05-11 10:53:53 发布
阅读量833 收藏 3
点赞数 1
分类专栏： clickhouse 文章标签： 数据库 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lelell1100/article/details/117319880
版权

1. 环境准备

IP系统数据库版本内存CPU磁盘
192.168.5.31CentOS Linux release 7.6.1810 (Core)clickhouse1.1.5423696GB2X16核4X600GB sas raid 10
192.168.5.32CentOS Linux release 7.6.1810 (Core)clickhouse1.1.5423696GB2X16核8X600GB sas raid 10
192.168.5.33CentOS Linux release 7.6.1810 (Core)clickhouse1.1.5423696GB2X16核8X600GB sas raid 10

所需包：
clickhouse-client-20.8.3.18-1.el7.x86_64.rpm
clickhouse-common-static-20.8.3.18-1.el7.x86_64.rpm
clickhouse-server-20.8.3.18-1.el7.x86_64.rpm
clickhouse-server-common-20.8.3.18-1.el7.x86_64.rpm

2. 安装配置clickhouse

2.1 创建用户

useradd -m clickhouse
passwd clickhouse
clickhouse@123

2.2 安装clickhouse软件(root)

#上传clickhouse安装帮到/opt/clickhouse下：
cat /opt/clickhouse/

rpm -ivh clickhouse*

2.3 磁盘规划

su - clickhouse
mkdir -p /home/clickhouse/{log,data}

2.4 修改启动脚本

vim  /etc/rc.d/init.d/clickhouse-server

CLICKHOUSE_LOGDIR=/home/clickhouse/log
CLICKHOUSE_LOGDIR_USER=clickhouse
CLICKHOUSE_DATADIR=/home/clickhouse/data

# 修改其中一个，将修改的文件发送到其他两台主机
scp -rp /etc/rc.d/init.d/clickhouse-server 192.168.5.32:/etc/rc.d/init.d/

2.5 修改config.xml配置

注意其中不同sever配置对应不同主机ip地址

修改config.xml中相关内容

vim /etc/clickhouse-server/config.xml

<log>/home/clickhouse/log/clickhouse-server.log</log>
<errorlog>/home/clickhouse/log/clickhouse-server.err.log</errorlog>
<path>/home/clickhouse/data/clickhouse/</path>
<tmp_path>/home/clickhouse/data/clickhouse/tmp/</tmp_path>
<users_config>users.xml</users_config>
<interserver_http_host>192.168.5.31</interserver_http_host>
<listen_host>::1</listen_host>
<listen_host>0.0.0.0</listen_host>
<format_schema_path>/home/clickhouse/data/clickhouse/format_schemas/</format_schema_path>

在<zookeeper incl="zookeeper-servers" optional="true" />上面
添加下面一条
    <include_from>/etc/clickhouse-server/metrika.xml</include_from>
--=================================================

<!--	修改其中一个，将修改的文件发送到其他两台主机，修改本机ip即可		-->
scp -rp /etc/clickhouse-server/config.xml 192.168.5.32:/etc/clickhouse-server/config.xml

<!--给clickhouse-server 所属为clickhouse-->
chown -R clickhouse:clickhouse /var/lock/clickhouse-server

3. 安装配置zookpeer

3.1 安装配置jdk

# 查看Java版本
java –version

#上传jdk1.8.0_271 到 /opt/java/
mkdir -p /opt/java/

#安装jdk1.8.0_271
echo " ">>/etc/profile
echo "# Made for jdk env by lele on $(date +%F)">>/etc/profile
echo 'export JAVA_HOME=/opt/java/jdk1.8.0_271'>>/etc/profile
echo 'export JRE_HOME=$JAVA_HOME/jre'>>/etc/profile
echo 'export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib'>>/etc/profile
echo 'export PATH=$JAVA_HOME/bin:$PATH'>>/etc/profile

tail -6 /etc/profile
source /etc/profile
echo $PATH

3.2 安装zookpeer

Zookeeper下载路径https://archive.apache.org/dist/zookeeper/zookeeper-3.4.13/zookeeper-3.4.13.tar.gz
Zookeeper 版本zookeeper-3.4.13.tar.gz
#创建zookeeper用户
useradd zookeeper -m
passwd zookeeper
zookeeper@123

#解压安装
[postgres@docker2 ~]$ tar -zxvf zookeeper-3.4.13.tar.gz
#修改配置文件
[postgres@docker2 ~]$ cd /home/zookeeper/zookeeper-3.4.13/conf
[postgres@docker2 conf]$ vim zoo.cfg

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/home/zookeeper/zookeeper-3.4.13/data
dataLogDir=/home/zookeeper/zookeeper-3.4.13/log
clientPort=2181
server.1 = 192.168.5.31:2888:3888
server.2 = 192.168.5.32:2888:3888
server.3 = 192.168.5.33:2888:3888

# 创建数据目录
mkdir /home/zookeeper/zookeeper-3.4.13/data
mkdir /home/zookeeper/zookeeper-3.4.13/log

以下每个server都分别执行一下
# server1:
$ echo 1 > /home/zookeeper/zookeeper-3.4.13/data/myid

# server2:
$ echo 2 > /home/zookeeper/zookeeper-3.4.13/data/myid

# server3:
$ echo 3 > /home/zookeeper/zookeeper-3.4.13/data/myid

3.3 设置zookpeer环境变量

vim /etc/profile

# add by zookpeer
export ZOOKEEPER_HOME=/home/zookeeper/zookeeper-3.4.13
export PATH=$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf:$PATH

3.4 设置zookeeper开机自启动

#设置zookeeper开机自启动（3台服务器都设置）
vim /etc/rc.d/rc.local

#添加以下命令（我的zookeeper是postgres用户安装的）
export JAVA_HOME=/opt/java/jdk1.8.0_271
su - zookeeper -c "/home/zookeeper/zookeeper-3.4.13/bin/zkServer.sh start"

#赋可执行权限
chmod a+x /etc/rc.d/rc.local

3.5 启动zk集群

#启动zookeeper：
/home/zookeeper/zookeeper-3.4.13/bin/zkServer.sh start
#查看zookeeper状态：
/home/zookeeper/zookeeper-3.4.13/bin/zkServer.sh status
#关闭zookeeper：
/home/zookeeper/zookeeper-3.4.13/bin/zkServer.sh stop

4. clickhouse集群配置

4.1 配置metrika.xml

<yandex>
<clickhouse_remote_servers>
    <my_cluster>
        <shard>
             <internal_replication>true</internal_replication>
            <replica>
                <host>192.168.5.31</host>
                <port>9000</port>
            </replica>
            <replica>
                <host>192.168.5.32</host>
                <port>9000</port>
            </replica>
            <replica>
                <host>192.168.5.33</host>
                <port>9000</port>
            </replica>
        </shard>
    </my_cluster>
</clickhouse_remote_servers>

<zookeeper-servers>
  <node index="1">
    <host>192.168.5.31</host>
    <port>2181</port>
  </node>
  <node index="2">
    <host>192.168.5.32</host>
    <port>2181</port>
  </node>
  <node index="3">
    <host>192.168.5.33</host>
    <port>2181</port>
  </node>
</zookeeper-servers>

<macros>
    <shard>01</shard>
    <replica>192.168.5.31</replica>
</macros>

<networks>
   <ip>::/0</ip>
</networks>

<clickhouse_compression>
<case>
  <min_part_size>0</min_part_size>
  <min_part_size_ratio>0.01</min_part_size_ratio>
  <method>lz4</method>
</case>
</clickhouse_compression>

4.2 启动cilckhouse集群

service clickhouse-server start

4.3 卸载clickhouse集群

#卸载clickhouse:yum remove clickhouse* -y
#删除剩余目录及文件
cd /var/lib/
rm -rf clickhouse/
cd /etc/
rm -rf clickhouse-*
cd /var/spool/mail
rm -f clickhouse
cd /var/lock
rm -f clickhouse-server

4.3 测试clickhouse集群

clickhouse-client -h 127.0.0.1 --port 9000 -u default -m
select 1;
select * from system.clusters\G

Row 1:
──────
cluster:                 my_cluster
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               192.168.5.31
host_address:            192.168.5.31
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 2:
──────
cluster:                 my_cluster
shard_num:               1
shard_weight:            1
replica_num:             2
host_name:               192.168.5.32
host_address:            192.168.5.32
port:                    9000
is_local:                0
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 3:
──────
cluster:                 my_cluster
shard_num:               1
shard_weight:            1
replica_num:             3
host_name:               192.168.5.33
host_address:            192.168.5.33
port:                    9000
is_local:                0
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 4:
──────
cluster:                 test_cluster_two_shards
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               127.0.0.1
host_address:            127.0.0.1
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 5:
──────
cluster:                 test_cluster_two_shards
shard_num:               2
shard_weight:            1
replica_num:             1
host_name:               127.0.0.2
host_address:            127.0.0.2
port:                    9000
is_local:                0
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 6:
──────
cluster:                 test_cluster_two_shards_localhost
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 7:
──────
cluster:                 test_cluster_two_shards_localhost
shard_num:               2
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 8:
──────
cluster:                 test_shard_localhost
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 9:
───────
cluster:                 test_shard_localhost_secure
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    9440
is_local:                0
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 10:
───────
cluster:                 test_unavailable_shard
shard_num:               1
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    9000
is_local:                1
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

Row 11:
───────
cluster:                 test_unavailable_shard
shard_num:               2
shard_weight:            1
replica_num:             1
host_name:               localhost
host_address:            ::1
port:                    1
is_local:                0
user:                    default
default_database:        
errors_count:            0
estimated_recovery_time: 0

11 rows in set. Elapsed: 0.004 sec.
lelell1100
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
clickhouse-rpm安装包 clickhouse安装包
02-12
clickhouse-rpm安装包 clickhouse安装包方便大家用yum安装！
clickhouse 如何使用SQL 管理用户和角色
pang_2899的博客
08-10 3085
clickhouse 用户权限管理
clickhouse配置远程连接的问题
呆萌的代Ma
02-06 1498
打开注释：::
clickhouse官方文档_初探ClickHouse的RBAC权限功能
weixin_39597868的博客
11-28 516
最近电脑出了点问题，所以断更了一段时间，现在问题都解决了所以我也就回归啦。在4.28号的线上 Meetup 中，朵夫介绍了 ClickHouse 的一项新特性，即基于角色的RBAC权限功能，当时我就觉得这将会是一项实用的功能。会后我查阅了相关资料，发现在新版本中不仅新增了Role 的概念，对于User (用户)、 Row Policy (行级权限)、Settings Profile ...
ClickHouse 管理与运维（用户配置&权限配置&备份）
wa123579的博客
04-27 1072
分析用户配置文件结构 <?xml version="1.0"?> <yandex> <profiles><!-- 类似于角色的作用,支持继承--> <default><!-- 自定义名称，默认角色--> <max_memory_usage>10000000000</max_memory_usage> <load_balancing&gt
centos安装clickhouse22.2.2.1离线rpm安装包2022年6月版本很新
09-20
centos安装clickhouse22.2.2.1离线rpm安装包2022年6月版本很新
ClickHouse用户及权限分配
hjkl52wh的博客
08-31 4343
clickhouse数据库用户及权限分配；
ClickHouse的RPM安装手册
言午玉口才
05-18 1761
ClickHouse的RPM安装手册 1.单机版的安装 1.1 源地址下载路径： 地址一：Index of /clickhouse/rpm/stable/x86_64/ 地址二：Index of /clickhouse/rpm/stable/x86_64/ 此处下载的版本为： 实例： https://repo.clickhouse.com/rpm/stable/x86_64/clickhouse-server-21.3.9.83-2.noarch.rpm 1.2 检查 先检查是否已经安
centos 7.9 RPM包部署clickhouse 20.10.3.30版本安装与配置（详细部署及问题汇总）
最新发布
weixin_51485976的博客
05-11 1142
clickhouse集群部署及问题汇总
【HBZ分享】RPM方式集群部署ClickHouse
a645293829的博客
03-30 2556
一. 环境准备 这里博主准备了4台阿里云服务器，其中一台部署ZooKeeper，另外3台部署ClickHouse集群 二. ZooKeeper的Docker部署 Docker部署ZK命令： docker run -d --name zookeeper -p 2181:2181 -t zookeeper:3.7.0 注意：如果是云服务器部署，一定要开放2181端口 三. 下载ClickHouse安装包 下载地址：https://clickhouse.com/docs/zh/getting-started
clickhouse集群部署
07-17
clickhouse集群安装脚本——贵宾版。 可以自行修改，简洁易用。 实验证明，所部署的clickhouse集群具备高可用和稳定性。 注意！！！下载后3个月内提供免费维护！！！
Kafka2.3.0集群安装
09-14
Kafka2.3.0集群安装
clickhouse集群配置.zip
12-26
clickhouse集群配置，host配置文件，以供参照官方文档配置时候的参考,以便于快速的搭建出集群，便于使用
zookeeper集群安装.doc
05-27
zookeeper集群安装.doc
集群rpm安装MySQL步骤详解
12-15
b)安装mysql源:yum localinstall mysql57-community-release-el7-8.noarch.rpm 若结尾出现complete!，则说明MySQL源安装完成 c)检测是否安装完成:yum repolist enabled | grep “mysql.*-community.*”　 d)安装...
ClickHouse-安装篇
adson1987的博客
11-13 7592
ClickHouse-安装篇安装前准备单机模式安装集群模式ClickHouse 的 Client 参数介绍设置用户和密码ClickHouse一些信息总结 操作系统:Centos-7.7 ClickHouse: YUM 在线安装，20.x 官网:https://clickhouse.yandex/ 具体安装细节看:https://clickhouse.tech/#quick-start 安装前准备 CentOS7 打开文件数限制： 在 /etc/security/limits.conf 这个文件的末尾加入一下
高级运维工程师教你centos离线安装clickhouse全网最详细
nasen512的博客
09-20 2135
centos系统离线安装clickhouse教程很详细
RPM包安装clickhouse
lizhenglyg的博客
03-31 1250
rpm包安装clickhouse指定版本 sudo yum install -y yum-utils sudo yum-config-manager --add-repo https://packages.clickhouse.com/rpm/clickhouse.repo sudo yum install --installroot=/data/udata/clickhouse-rpm \ -y clickhouse-server-22.3.2.2-2 clickhouse-client-22.3.2
ClickHouse RPM包安装部署（单机）
80后大叔爱学习
10-31 828
ClickHouse rpm包安装部署
使用ansible安装部署clickhouse集群
02-17
要使用 Ansible 安装部署 ClickHouse 集群，需要完成以下步骤： 1. 确保已经在每个目标主机上安装了 ClickHouse，并确保 ClickHouse 已经可以正常运行。 2. 创建一个 Ansible 的 inventory 文件，该文件列出了所有...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值