【大数据入门核心技术-Doris】（二）Doris安装部署

forest_long

已于 2023-09-27 11:52:01 修改

阅读量374

点赞数

分类专栏：大数据技术入门到21天通关文章标签：大数据 database bigdata hadoop hive hbase clickhouse

于 2023-09-22 19:58:52 首次发布

本文链接：https://blog.csdn.net/forest_long/article/details/133183799

版权

大数据技术入门到21天通关专栏收录该内容

165 篇文章 8 订阅 ¥49.90 ¥99.00

订阅专栏

超级会员免费看

本文详细介绍了Doris的大数据入门安装部署过程，包括系统要求、环境修改、FE和BE的部署步骤，以及可能出现的问题及解决方法。通过连接FE、WebUI查看和注册BE等操作，确保Doris集群正常运行。

摘要由CSDN通过智能技术生成

一、准备工作

1、系统要求

Linux 操作系统版本需求

Linux 系统	版本
CentOS	7.1 及以上
Ubuntu	16.04 及以上

软件需求

软件	版本
Java	1.8 及以上
GCC	4.8.2 及以上

集群部署

主机 1	主机 2	主机 3
FE(LEADER)	FE(FOLLOWER)	FE(OBSERVER)
BE	BE	BE
BROKER	BROKER	BROKER

生产环境建议 FE 和 BE 分开。

2、环境修改

修改可打开文件数&#x

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

forest_long

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

Docker安装部署Doris集群

JustinMars的博客

09-01

415

docker 安装doris

【大数据入门核心技术-Doris】（七）Docker安装Doris

05-20

1023

用于控制进程可以拥有的内存映射区域的最大数量。，特别是在使用大量内存映射文件的情况下。，如果希望永久修改参数的值，可以编辑。是一个与内核虚拟内存子系统相关的参数。首先需要在宿主机执行如下命令。题，可设置回默认值，

参与评论您还未登录，请先登录后发表或查看评论

ubuntu20配置doris集群

rjbcxhc的专栏

02-01

337

Ubuntu 22 安装 Apache Doris 3.0.3 笔记

热门推荐

IvanLJF的专栏

01-14

1万+

DORIS下载网址：http://doris.tudelft.nl/ Doris软件最新的信息总可以在这个网址上查到：http://enterprise.tudelft.nl/doris/ FFTW:http://www.fftw.org/ StamPS:http://homepages.see.leeds.ac.uk/~earahoo/stamps/snaphu-v1.4.2

Apache Doris 2.x 版本【保姆级】安装+使用教程

李指导的博客

04-25

6290

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，Apache Doris 能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景，用户可以在此之上构建用户行为分析、AB 实验平台、日志检索分析、用户画像分析、订单分析等应用。

Ubuntu下安装Doris、StaMPS详细教程

我本飘零客我乘风雨来人间只小住岁久自离开

12-21

1572

Ubuntu下安装Doris、StaMPS详细教程，包括matlab安装，路径安排等...

【大数据入门核心技术-Doris】（三）Doris基础使用

09-27

595

label：Label 的主要作用是唯一标识一个导入任务，并且能够保证相同的 Label 仅会被成功导入一次，具体可以查看数据导入事务及原子性。上述表通过设置 replication_num 建的都是单副本的表，Doris建议用户采用默认的 3 副本设置，以保证高可用。示例1：以 "table1_20170707" 为 Label，使用本地文件 table1_data 导入 table1 表。可以使用任一 BE 的 IP，以及 be.conf 中的 webserver_port 进行导入。

【大数据入门核心技术-Doris】（六）数据导入

11-28

593

用于指定导入文件中的列分隔符，默认为\t。如果是不可见字符，则需要加\x作为前缀，使用十六进制来表示分隔符。如hive文件的分隔符\x01，需要指定为-H "column_separator:\x01"。-H “label:load_local_file_test” \ # 本次任务的唯一标识。http://主机名:端口号/api/库名/表名/_stream_load。用于指定导入文件中的换行符，默认为\n。可以使用多个字符的组合作为列分隔符。可以使用做多个字符的组合作为换行符。

【大数据入门核心技术-Doris】（三）Doris基本Shell和数据模型

11-27

1234

参考。在某些多维分析场景下，用户更关注的是如何保证 Key 的唯一性，即如何获得 Primary Key 唯一性约束。因此，我们引入了 Unique 数据模型。在1.2版本之前，该模型本质上是聚合模型的一个特例，也是一种简化的表结构表示方式。由于聚合模型的实现方式是读时合并（merge on read)，因此在一些聚合查询上性能不佳（参考后续章节聚合模型的局限性的描述），在1.2版本我们引入了Unique模型新的实现方式，写时合并（merge on write），通过在写入时做一些额外的工作，实现了最优的查

在Ubuntu20.04单机部署Doris1.1

云来山更佳，云去山如画

08-15

3074

在Ubuntu20.04单机部署Doris1.1

ubuntu下安装doris教程

08-24

ubuntu下安装doris教程希望能够帮助到你！

doris5.0安装教程

04-14

由于doris5.0.3的版本问题过多，使用非常不方便，没有doris5.0版本稳定，故推荐安装5.0版本

Apache Doris 2.0.2 安装步骤 Centos8

Feike

01-05

2145

Apache Doris 2.0.2安装步骤 Centos 8

【Doris的安装与部署】

weixin_45363959的博客

05-15

4544

Doris作为一款MPP架构的OLAP数据库，可以在绝大多数主流的商用服务器上运行。

Doris安装部署

weixin_44891093的博客

07-11

289

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。

linux CentOS 安装 Doris 单机测试安装

dujunwoaini的博客

07-27

1076

Apache Doris Linux环境安装部署：FE BE Broker部署及扩缩容；Doris集群一键启停脚本

学亮编程手记

02-12

2774

Doris 运行在 Linux 环境中，推荐 CentOS 7.x 或者 Ubuntu 16.04 以上版本，同时你需要安装 Java 运行环境，JDK最低版本要求是8。我们这里使用的是Linux Centos7.9版本，jdk为1.8。Broker 是用于访问外部数据源（如 hdfs）的进程，通常在每台机器上部署一个 broker 实例即可。

linux安装doris集群详细操作步骤

2301_77356579的博客

08-14

894

linux安装doris集群详细操作步骤以及Doris一键启停脚本

Java8编译版apache-doris-0.12.0源码包发布

标签 'doris-0.12.0' 表明这个版本对应的是 Apache Doris 的 0.12.0 版本，而 'incubating' 表示该版本正在 Apache 软件基金会的孵化阶段，意味着它正在向 Apache 社区展示其成熟度和稳定性，但尚未成为完全的 ...