Doris集群部署

本文详细描述了Doris数据库的部署步骤,包括硬件和软件要求、网络配置、系统配置文件修改、FE高可用服务部署、BE服务部署以及Broker的部署,旨在帮助用户顺利搭建和管理分布式环境。

一、环境要求

1、软硬件要求

Doris 作为一款开源的 MPP 架构 OLAP 数据库,能够运行在绝大多数主流的商用服务器上。为了能够充分运用 MPP 架构的并发优势,以及 Doris 的高可用特性,我们建议 Doris 的部署遵循以下需求:

1.系统要求
Linux系统 版本
Centos 7.1 及以上
Ubuntu 16.04 及以上
2.软件版本要求
软件 版本
Java 1.8
GCC 4.8.2 及以上

2、网络需求

实例名称 端口名称 默认端口 通讯方向 说明
BE be_port 9060 FE --> BE BE 上 thrift server 的端口,用于接收来自 FE 的请求
BE webserver_port 8040 BE <–> BE BE 上的 http server 的端口
BE heartbeat_service_port 9050 FE --> BE BE 上心跳服务端口(thrift),用于接收来自 FE 的心跳
BE brpc_port 8060 FE <–> BE, BE <–> BE BE 上的 brpc 端口,用于 BE 之间通讯
FE http_port 8030 FE <–> FE,用户 <–> FE FE 上的 http server 端口
FE rpc_port 9020 BE --> FE, FE <–> FE FE 上的 thrift server 端口,每个fe的配置需要保持一致
FE query_port 9030 用户 <–> FE FE 上的 mysql server 端口
FE arrow_flight_sql_port 9040 用户 <–> FE FE 上的 Arrow Flight SQL server 端口
FE edit_log_port 9010 FE <–> FE FE 上的 bdbje 之间通信用的端口
Broker broker_ipc_port 8000 FE --> Broker, BE --> Broker Broker 上的 thrift server,用于接收请求

二、系统配置文件修改

1、设置系统最大打开文件句柄数

vim /etc/security/limits.conf 
* soft nofile 65536
* hard nofile 65536

2、关闭交换分区(swap)

Linux交换分区会给Doris带来很严重的性能问题,需要在安装之前禁用交换分区,使用临时修改和永久修改,可以避免重启服务器。

#永久修改
#注释掉swap 行 
vim /etc/fstab

#UUID=bd7489db-42dc-4e01-96ab-864eae12f02e swap                    swap    defaults        0 0


#临时修改
swapoff -a

#查询是否关闭
#Swap:             0           0           0全部为0是关闭状态
free -m

              total        used        free      shared  buff/cache   available
Mem:          21031        2364        9667          38        9000       18278
Swap:             
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值