单机安装clickhouse 24.4.1.2088

最新推荐文章于 2024-06-21 07:33:16 发布
最新推荐文章于 2024-06-21 07:33:16 发布
阅读量609 收藏 10
点赞数 16
分类专栏： clickhouse 文章标签： 运维 linux 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaoyang1982/article/details/139245292
版权

  1. 修改系统参数

vi  /etc/security/limits.conf #文件句柄数量的配置

* soft nofile 65536

* hard nofile 65536

* soft nproc 131072

* hard nproc 131072

:wq! #保存退出

vi /etc/security/limits.d/20-nproc.conf

* soft nofile 65536

* hard nofile 65536

* soft nproc 131072

* hard nproc 131072

:wq! #保存退出

安装依赖

yum install -y libtool *unixODBC*

如果163源太慢，可以更改为腾讯源

创建存储目录

1.3、目录说明

/etc/clickhouse-server  #服务端的配置文件目录，包括全局配置config.xml和用户配置users.xml等

/etc/clickhouse-client  #客户端配置，包括conf.d文件夹和config.xml文件

/var/lib/clickhouse  #默认的数据存储目录，建议修改路径到大容量磁盘

/var/log/clickhouse-server  #默认保存日志的目录，建议修改路径到大容量磁盘

mkdir /data460/uploadfiles

 chown -R lrops:lrops /data460/uploadfiles/

scp -P29022 -r /data460/uploadfiles/* lrops@172.29.0.62:/data460/uploadinstalls/

安装clickhouse的服务端和客户端

cd /data460/uploadfiles/clickhouse24

yum localinstall -y clickhouse-common-static-24.4.1.2088.x86_64.rpm

yum localinstall -y clickhouse-server-24.4.1.2088.x86_64.rpm

 yum localinstall -y clickhouse-client-24.4.1.2088.x86_64.rpm

1.4、新建存储目录

#数据存储目录

mkdir -p /data460/server/clickhouse/data

#日志存放目录

mkdir -p /data460/server/clickhouse/log

#修改目录权限：

chown clickhouse:clickhouse /data460/server/clickhouse/data -R

chown clickhouse:clickhouse /data460/server/clickhouse/log -R

chmod 755 /data460/server/clickhouse/data -R

chmod 755 /data460/server/clickhouse/log -R

5)启动服务daunt

service clickhouse-server start

Linux transparent hugepages are set to "always". Check /sys/kernel/mm/transparent_hugepage/enabled

需要关闭透明大页

echo 'never' > /sys/kernel/mm/transparent_hugepage/enabled

在 /etc/rc.local 或启动脚本中添加以下行，使 THP 禁用设置永久生效：

echo 'never' > /sys/kernel/mm/transparent_hugepage/enabled

echo 'never' > /sys/kernel/mm/transparent_hugepage/defrag

最佳实践

vim /etc/systemd/system/disable-transparent-huge-pages.service

写入以下内容

[Unit]

Description=Disable Transparent Huge Pages (THP)

DefaultDependencies=no

After=sysinit.target local-fs.target

Before=mongod.service

[Service]

Type=oneshot

ExecStart=/bin/sh -c 'echo never | tee /sys/kernel/mm/transparent_hugepage/enabled > /dev/null'

[Install]

WantedBy=basic.target

启动服务

systemctl daemon-reload

systemctl enable disable-transparent-huge-pages

systemctl start disable-transparent-huge-pages

6)启动交互式客户端

clickhouse-client

1.5、设置数据库密码，默认用户名是：default

cp /etc/clickhouse-server/users.xml /etc/clickhouse-server/users.xml.bak

vim /etc/clickhouse-server/users.xml

<password>test*123</password>

修改用户权限控制

<!-- User can create other users and grant rights to them. --> 

<access_management>1</access_management> # 该部分控制权限，把原本注释去掉就能建用户了

# 下面这几行也要加，不然授权all的时候会提示权限不足 <named_collection_control>1</named_collection_control> 

<show_named_collections>1</show_named_collections> 

<show_named_collections_secrets>1</show_named_collections_secrets>

:wq! #保存退出

2、修改配置文件

修改3台服务器ClickHouse配置文件 /etc/clickhouse-server/config.xml

cp /etc/clickhouse-server/config.xml /etc/clickhouse-server/config.xml.bak  #备份

2.1、修改全局配置信息

vim /etc/clickhouse-server/config.xml

<timezone>Asia/Shanghai</timezone> #修改时区

<listen_host>::</listen_host> #开启外部访问

<path>/data460/server/clickhouse/data/</path> #修改数据存放路径，默认是<path>/var/lib/clickhouse</path>

<level>error</level> #不记录日志 trace 记录日志,设置为error

<log>/data460/server/clickhouse/log/clickhouse-server.log</log>  <errorlog>/data460/server/clickhouse/log/clickhouse-server.err.log</errorlog>

<max_open_files>1048576</max_open_files> #文件句柄数量的配置

<http_port>8123</http_port> #http默认端口

<tcp_port>9000</tcp_port> #tcp默认端口

:wq! #保存退出

#临时文件目录暂时不修改，系统盘空间应该够。

提示报错DNS error: EAI: Address family for hostname not supported

本机没有开放ipv6 更改<listen_host>0.0.0.0</listen_host> ，再次启动服务成功。

service clickhouse-server start

clickhouse-client 登入

show databases;

Clickhouse备份工具安装

yum -y localinstall clickhouse-backup-2.5.10-1.x86_64.rpm

简单备份操作。

查看readonly策略组是否存在

cat /etc/clickhouse-server/users.xml|grep readonly

创建备份用户，使用'default'策略组

CREATE USER bkuser IDENTIFIED WITH plaintext_password BY 'backupUser*2' SETTINGS PROFILE 'default'; 

alter user bkuser setting profile 'default';

GRANT SHOW TABLES, SELECT ON *.* TO bkuser;

//GRANT ALL ON *.* TO bkuser with grant option ; //全部权限,如果不授予此权限，一般不需要

cd /etc/clickhouse-backup/

cp config.yml.example config.yml

vim  config.yml

以root用户或者clickhouse用户执行本地备份

clickhouse-backup create

提示报错，没有表可以备份。

我们创建test库和表进行测试

建库

CREATE DATABASE IF NOT EXISTS test01;

建表

CREATE TABLE IF NOT EXISTS test01.test ( `date` Datetime, `user_id` String, `pageviews` Int32 ) ENGINE = MergeTree() PARTITION BY toStartOfHour(`date`) ORDER BY (`date`);

插入测试数据

INSERT INTO test01.test VALUES ('2021-01-13 07:00:00', 'user 1', 7), ('2021-01-13 08:00:00', 'user 2', 3), ('2021-01-13 09:00:00', 'user 3', 1), ('2021-01-13 10:00:00', 'user 4', 12);

选择

Use test01;

Select * from test;

//查看system.databases库存储

再次创建备份。

提示报错

Not enough privilege

s. To execute this query, it's necessary to have the grant ALTER FREEZE PARTITION ON test01.test

进入clickhouse增加授权

GRANT ALTER FREEZE PARTITION ON *.* TO bkuser;

再次备份  clickhouse-backup create

备份成功

查看备份 clickhouse-backup list

有个坑注意一下：

我默认执行了clickhouse然后竟然进入服务了，然后创建数据库、表、插入数据，然后其实创建的实在/tmp目录，退出重进就没有了。我以为出了灵异事件，大家记得用clickhouse-client进入。再次部署后，执行clickhouse命令就会有报错提示，不知道当时是咋了。

小扬的马甲
关注
  • 16
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Awvs最新v24.4.27
05-26
** Awvs最新v24.4.27 ** Acunetix Web Vulnerability Scanner（简称AWVS）是一款备受推崇的网络安全工具，专门设计用于自动检测Web应用程序中的安全漏洞。这款软件通过深入分析网站的代码和功能，识别出潜在的安全...
FC24 Companion_v24.4.1.5721.apk
03-02
FC24 Companion_v24.4.1.5721.apk
ClickHouse 24.5.3：全面解析与RPM单节点轻松部署！
qq_34692500的博客
06-21 943
简介 ClickHouse是由俄罗斯的Yandex公司开发的开源列式数据库管理系统。它最早于2016年开源，主要用于实时数据分析。ClickHouse通过列存储、向量化执行、并行计算等技术，实现了对大规模数据集的快速查询和分析，特别适合实时数据分析和商业智能需求。ClickHouse的特点列式存储：ClickHouse采用列式存储，能够在查询时只读取相关列的数据，从而提高查询速度，减少I/O开...
ClickHouse 发布 24.2 版本
ClickHouseDB的博客
04-24 686
这触发了一个新的缓冲区刷新周期，使用默认的缓冲区刷新超时，这意味着该查询的发送者需要等待完整的默认缓冲区刷新时间（OSS 为 200 毫秒，ClickHouse Cloud 为 1000 毫秒）才能收到插入的确认。在确保这一点尽可能高效的同时，我们注意到该函数还执行了任何常量参数的必要解包操作（最常见的用例即我们传递一个常量向量进行比较），这导致了不必要的内存复制。在传统的插入查询中，数据是同步插入到表中的：当 ClickHouse 收到查询时，数据会立即以数据part的形式写入到数据库存储中。
ClickHouse安装与下载
weixin_45322869的博客
07-05 5040
ClickHouse是俄罗斯的Yandex于2016年开源的一个用于联机分析(OLAP:Online Analytical Processing)的列式数据库管理系统(DBMS:Database Management System) , 主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告。ClickHouse的全称是Click Stream，Data WareHouse，简称ClickHouse。
ClickHouse 24.4 版本发布说明
ClickHouseDB的博客
05-25 1060
本文字数：13148；估计阅读时间：33 分钟审校：庄晓东（魏庄）本文在公众号【ClickHouseInc】首发新的一个月意味着新版本的发布！发布概要本次ClickHouse 24.4版本包含了🎁、🛷、🐛和往常一样，我们向 24.4 版本中的所有新贡献者表示热烈欢迎！ClickHouse 的受欢迎程度在很大程度上归功于社区的努力。看到社区不断壮大总是令人感到骄傲。
使用clickhouse-keeper进行clickhouse集群安装
2301_78602537的博客
09-22 1048
使用clickhouse-keeper进行clickhouse集群安装
24.4.16.01.zip
04-16
标题"24.4.16.01.zip"和描述"24.4.16.01.zip"似乎仅指一个压缩文件的名称，没有提供任何具体的技术主题或内容。标签为空，同样没有提供额外的线索。压缩包子文件的文件名称列表只包含"24.4.16.01"这一个条目，也没有...
emacs-24.4.tar.xz
03-03
py依赖包
Awvs-v24.4.240514098-Windows
最新发布
07-25
Awvs web漏洞扫描工具
Clickhouse 版本号历史
vkingnew 的技术博客
07-13 7792
参考： https://github.com/ClickHouse/ClickHouse/issues/8285 https://github.com/ClickHouse/ClickHouse/issues/9875 https://github.com/ClickHouse/ClickHouse/issues/6501 https://clickhouse.tech/docs/en/introduction/history/
clickhouse功能一览
qq_26249609的博客
10-10 259
https://blog.csdn.net/vagabond6/article/details/79555327
Click House设置远程登陆及修改默认用户名密码
热门推荐
welcome66的专栏
12-21 1万+
最近在研究Click House，部署、配置及使用都整理一下。 1.设置远程登陆 默认安装完，是只能本地进行访问，即：127.0.0.1，如果向想让其他机器访问就需要修改配置文件了，步骤如下： 修改config.xml文件 vim /etc/clickhouse-server/config.xml 找到下面的语句，将其注释去掉即可： <listen_host>::</listen_host> 保存退出 重启Click House /etc/init.d/cl.
3分钟快速安装 ClickHouse、配置服务、设置密码和远程登录以及修改数据目录
u011197085的博客
12-25 2197
下面是一个完整的 ClickHouse 安装和配置流程，包括安装 ClickHouse、配置服务、设置密码和远程登录以及修改数据目录。
ClickHouse写入2000万数据查询体验
lishuangquan1987的博客
05-17 558
ClickHouse只支持运行在linux上，我们使用最简单的docker安装拉取后运行。
linux clickhouse 安装
那些乐趣的博客
01-24 1508
/var/log/clickhouse-server/clickhouse-server.log目录下，可以通过修改配置文件/etc/clickhouse-server/config.xml进行指定数据文件，修改/var/log/clickhouse-server/clickhouse-server.log/soft/clickhouse/log/clickhouse-server.log
clickhouse安装及简单使用
花菜回锅肉的博客
01-18 1445
clickhouse设计比较精简，具有强大的数据写入性能、极其高效的查询性能、高效压缩存储，单机部署性能丝毫不逊色于传统的大数据集群。由于使用体验简单直接，使得运维工作同样变的简单。版本迭代相当迅速，主动兼容了jdbc、mysql和postgresql这些成熟产品，周边生态成熟。非常适合用来搭建数据仓库。clickhouse的官网文档有中文版，写的还是比较全的，可以多去参考查阅。
华为云云耀云服务器L实例评测｜单节点环境下部署ClickHouse21.1.9.41数据库
Maynor的博客
09-15 941
​云耀云服务器L实例是新一代的轻量应用云服务器，专门为中小企业和开发者打造，提供开箱即用的便利性。云耀云服务器L实例提供丰富且经过严格挑选的应用镜像，可以一键部署应用，极大地简化了客户在云端构建电商网站、Web应用、小程序、学习环境以及各类开发测试等任务的过程。​ClickHouse是一个开源的列式数据库管理系统，旨在处理大量数据和查询。它最初由俄罗斯搜索引擎公司Yandex开发，现在已经成为一个独立的开源项目。ClickHouse的主要特点是快速、可扩展和高性能。
numpy-1.24.4-cp311
10-03
numpy-1.24.4-cp311是指针对Python 3.11版本编译的Numpy库的版本。Numpy是Python中一个重要的数值计算库，它提供了高效的多维数组对象和用于数值计算的工具。通过使用Numpy库，我们可以进行各种数学和科学计算，如矩阵运算、线性代数、傅里叶变换等。 而版本号“1.24.4”表示此版本是Numpy库的第1.24.4个发布版本。版本号的更新通常代表着库的修复bug、增加新功能或者进行性能优化等方面的改进。 - cp311 表示此版本是专为CPython解释器（即用C语言实现的Python解释器）的3.11版本编译的。CPython是Python的官方解释器，它是使用C语言编写的，提供了Python程序执行的环境。 综上所述，numpy-1.24.4-cp311是专为Python 3.11版本的CPython解释器编译的Numpy库的版本。它是在Numpy基础上进行了改进和优化，以提供更好的性能和功能。这个版本的Numpy可以用于进行各种数值计算和科学计算任务，并且可以与Python 3.11版本的代码无缝集成。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值