【Doris】Apache Doris Grafana 监控指标介绍

最新推荐文章于 2023-12-03 21:22:45 发布
最新推荐文章于 2023-12-03 21:22:45 发布
阅读量426 收藏 2
点赞数
分类专栏： 【BigData】 文章标签： apache 大数据 mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_54252387/article/details/125694451
版权
本文详细介绍了Apache Doris的监控指标，重点关注FE JVM堆统计、BE内存使用、Max Replayed journal id、BDBJE Write、Tablet调度、BE IO统计和Compaction Score。这些指标对于理解Doris集群的健康状况和性能至关重要，有助于及时发现和解决问题。
摘要由CSDN通过智能技术生成

整个集群重点关注的几个指标：

- 集群 FE JVM 堆统计

- 集群BE内存使用情况概览

- Max Replayed journal id

- BDBJE Write

- Tablet调度情况

- BE IO统计

- BE Compaction Score

- Query Statistic这部分查询请求数及响应时间

- BE BC（Base Compaction）和CC（Compaction Cumulate）

1 总览视图

1.1 Doris FE状态

如果FE节点将显示为彩色点表示该节点已经掉线。如果所有前端都活着，则所有点都应为绿色。

图片

1.2

了解本专栏 订阅专栏 解锁全文 超级会员免费看
九层之台起于累土
关注
专栏目录
订阅专栏
【Doris】Prometheus+Grafana监控Doris
m0_54252387的博客
07-19 3683
DorisDB提供两种监控报警的方案，第一种是使用内置的DorisManager，其自带的Agent从各个Host采集监控信息上报到Center Service然后做可视化展示，也提供了邮件和Webhook的方式发送报警通知。但是如果用户为了二次开发需求，需要自己搭建部署监控服务，也可以使用开源的Prometheus+Grafana的方案，DorisDB提供了兼容Prometheus的信息采集接口，可以通过直接链接BE/FE的HTTP端口来获取集群的监控信息。如果采购DorisDB企业版，则提供DorisM
Apache Doris数据分析综合案例实战
05-07
综上所述，本案例通过详细的步骤介绍了如何利用Apache Doris进行大规模数据分析，并提供了从背景介绍、需求分析、实现方案到具体操作指南的一站式解决方案。通过本案例的学习，可以深入理解大数据实时处理的核心技术...
Doris实战篇-Doris监控
S1124654的博客
03-16 913
Doris实战篇-Doris监控
Tardigrade架构和原理
sleep1661的专栏
09-01 305
Tardigrade这个项目是trino社区最近一年启动的项目，核心目标是为了补充trino在批处理ETL场景可以提供更稳定可靠的使用体验。本篇主要讲述Tardigrade这个项目的架构和原理，同时也提出一些我们针对Tardigrade项目如何进行后续优化来完善trino批处理的能力。
应用实践 | Apache Doris 在网易互娱的应用实践
锋哥聊DORIS数仓
06-14 536
作者介绍：Pencil，网易游戏数据与平台的离线平台组高级开发工程师，目前负责 Trino (Presto)/Doris 等组件的开发和业务支持工作。离线平台小组目前为广州互娱的大数据离线计算提供了接近 EB 级别的大数据存储集群服务，以及 Hive/Spark/Presto/Doris/ClickHouse 等计算框架的开发与业务支持。随着公司游戏业务的高速发展，越来越多的分析需求涌现，例如：各类游戏用户行为分析、商业智能分析、数仓报表等。这些场景的数据体量都较大，对数据分析平台提出了很高的要求。为了解决
Doris(五)-监控、报警、优化、数据备份及恢复
大数据知识梳理
12-28 3995
Doris监控、报警、优化、数据备份及恢复
使用Prometheus和Grafana监控Apache Doris
Bulut0907
12-26 2272
Doris的FE和BE通过http端口metrics路径，将监控数据暴露出来，以key-value的文本形式对外展现，每个key还可能有不同的Label加以区分。Prometheus再从Doris拉取监控数据。
Apache Doris中文教程，来自尚硅谷
最新发布
09-09
Apache Doris中文教程，来自尚硅谷
Apache Doris
07-20
### Apache Doris 知识点详解 #### 一、Apache Doris 概述 - **起源与发展**：Apache Doris 最初由百度大数据部门研发，最初名为百度Palo。2018年，该项目被贡献至Apache软件基金会，并更名为Apache Doris。目前，...
Apache Doris 用户案例集
08-19
Apache Doris 用户案例集
从ApacheDoris到SelectDBCloud下一代
11-08
【标题】"从ApacheDoris到SelectDBCloud下一代"揭示了一个关键的话题，即在大数据处理领域，技术如何从Apache Doris这种开源分析型数据库发展到SelectDB Cloud这样的云原生实时数仓。Apache Doris是一款高性能、...
Doris-06-监控、报警以及Doris的优化
迷雾总会解
06-23 1637
过去 Apache Doris 的 SQL 执行引擎是基于行式内存格式以及基于传统的火山模型进行设计的，在进行 SQL 算子与函数运算时存在非必要的开销，导致 Apache Doris 执行引擎的效率受限，并不适应现代 CPU 的体系结构。向量化执行引擎的目标是替换 Apache Doris 当前的行式 SQL 执行引擎，充分释放现代 CPU 的计算能力，突破在 SQL 执行引擎上的性能限制，发挥出极致的性能表现。所以在建表时，将对应的列设置为 NULL 通常会影响向量化执行引擎的性能。
[技术选型] Trino介绍
959
02-18 1525
OLAP的Trino介绍以及一些案例架构分析
开源大数据OLAP引擎最佳实践
ytp552200ytp的博客
06-27 885
开源大数据OLAP引擎最佳实践
Doris学习笔记之监控
四国棋客
07-30 1396
Doris可以使用Prometheus和Grafana进行监控和采集，官网下载最新版即可。Doris的监控数据通过FE和BE的http接口向外暴露。监控数据以key-value的文本形式对外展现。每个key还可能有不同的Label加以区分。
【Doris】Apache Doris在网易互娱的应用实践
m0_54252387的博客
07-12 160
FE 的主要作用将 SQL 语句转换成 BE 能够认识的 Fragment，如果把 BE 集群当成一个分布式的线程池的话，那么 Fragment 就是线程池中的 Task。从 SQL 文本到分布式物理执行计划，FE 的主要工作需要经过以下几个步骤:tablet 数：2000w -> 100wtablet 增长量：15000/TB（1）对于现存的表扫描集群内所有的表，以分区粒度输出一份完整的数据统计给业务方，并根据每张表的实际情况附上修改建议；制定治理计划按照由高收益到低收益，优先处理最不合理的库，将元数据管
Apache Doris 详细教程（三）
白鸽
12-03 1073
在快照之后，对表进行的更改、导入等操作都不再影响备份的结果。这其实是一个空快照（因为刚创建的表是没有数据的），其目的主要是在 Backend 上产生对应的快照目录，用于之后接收从远端仓库下载的快照文件。备份操作是将指定表或分区的数据，直接以 Doris 存储的文件的形式，上传到远端仓库中进行存储。4、可以将仓库中备份的表恢复替换数据库中已有的同名表，但须保证两张表的表结构完全一致。3、备份和恢复都支持最小分区（Partition）级别的操作，当表的数据量很大时，建议按分区分别执行，以降低失败重试的代价。
从 Elasticsearch 到 Apache Doris，构建 10 倍性价比提升的新一代日志存储分析平台
crg18438610577的博客
05-07 656
从 Elasticsearch 到 Apache Doris，构建 10 倍性价比提升的新一代日志存储分析平台
Docker搭建Doris集群监控grafana+prometheus
zuoliansheng的博客
09-22 2045
说明：Doris 使用Prometheus和Grafana进项监控项的采集和展示。 来看一下这俩东西都是什么： 具体的架构形式是这样的 一、Docker安装Prometheus 说明：网上有跟多博客，可以教我们在Docker容器上安装Prometheus的，但是步骤比较复杂，我就不喜欢这么复杂的安装方式，所以我是使用Ubuntu16.04的基础镜像上搭建的，搭建下来会比直接用官方的镜像的搭建方式还要简单很多。 1.创建一个空的Ubuntu16.04的容器 ①预留8179端口，具体...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九层之台起于累土

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值