- 博客(22)
- 资源 (1)
- 收藏
- 关注
原创 Kudu运维篇:kudu集群中的数据Balancer平衡操作指南(二)
在管理 Kudu 集群时,数据重新平衡是一项重要的维护任务。重新平衡可以确保数据在集群中的分布更加均匀,从而提高集群的性能和可靠性。本文将分享如何在 Kudu 集群中执行数据重新平衡操作。
2024-05-28 15:35:46 882
原创 Kudu运维篇:CDH6 kudu跨集群迁移数据同步(一)
在大数据环境中,跨集群的数据迁移和同步是非常重要的操作。本文将详细介绍如何在 CDH6 集群中使用 Kudu 进行跨集群的数据迁移和同步。
2024-05-28 14:33:56 806
原创 YARN运维篇:Yarn运行中的任务如何终止
本文将介绍在YARN集群中如何终止正在运行的任务。通过掌握这些技巧,可以有效管理和优化YARN集群资源,确保任务的及时完成和系统的高效运行。
2023-08-22 14:17:09 2588
原创 CDH部署Kyuubi Parcel包服务
Apache Kyuubi™ 是一个分布式多租户网关,用于在数据仓库和 Lakehouse 上提供无服务器 SQL。本篇文章将介绍如何在CDH的集群中安装及使用Kyuubi服务。
2023-08-10 15:03:46 718 4
原创 Hue配置StarRocks连接器
Hue提供了直观简单的Web界面,并提供连接器组件,用于连接外部数据库,并支持多种类型的数据库,如MySQL、Oracle、PostgreSQL、Impala等。使用Hue,能够统一入口进行访问,并便于管理和操作。
2023-05-25 11:39:10 633 2
原创 Hue编译安装适配sparksql(hue+livy+sparksql+pyspark)
Hue是一个开源的SQL助手,用于数据仓库。它可以与Livy集成,以便更轻松地开发SQL片段。本篇文章带大家安装hue+livy,配置sparksql,pyspark
2023-04-17 15:57:07 1910
原创 Seatunnel实战:hive_to_starrocks
本篇文章带大家了解使用Seatunnel将Hive中的数据导入到StarRocks中。
2023-04-06 18:39:40 2799 3
原创 cdh升级zookeeper3.6.3集成parcels包cloudera Manager
cdh升级zookeeper3.6.3以及集成parcels包
2023-02-16 22:14:23 1024
原创 ClickHouse实战Prometheus远程存储(Prometheus Store ClickHouse)
Prometheus-Clickhuse-Adapter(Prom2click) 是一个将clickhouse作为prometheus 数据远程存储的适配器。
2022-12-02 17:42:34 3333 5
原创 CDH Parcel包starrocks集成cloudera Manager
CDH starrocks 集成cloudera Manager
2022-11-10 23:47:45 2780 47
原创 prometheus 监控clickhouse 集群(clickhouse_exporter监控ck -- 超详细)
一、prometheus通过exporter方式监控ck1、前言:如何通过prometheus监控clickhouse,最简单方案exporter插件,话不多说,先上两张这边导入配置的几张监控图2、先来总结下大致的流程如下:下载clickhouse_exporter插件在GitHub上面下载代码并编译(有坑,下面会讲解)启动exporter并配置prometheus结合grafana配置监控图二、下载clickhouse_exporter插件并编译GitHub地址:https://g
2021-11-16 11:33:41 7424 17
原创 hiveserver2打开文件数调整
一、hiveservice2文件打开数太多1、这几个hiveservice的文件数一直在告警,如图2、通过命令查看hiveservice的文件打开数lsof -p pid |wc -lhive文件打开数太多任务会出现(too many open files)3、解决方案查看现状的 hiveserver max : 32768ulimit -n65535cat /proc/sys/fs/file-max130572224、调大系统max进程参数1、进程的max : 65535
2021-08-05 16:44:50 1269
原创 Grafana-通过变量配置监控面板
1、配置数据源来存放你的变更,我这里使用clickhouse2、添加clickhouse数据源,或者MySQL都行,URL,用户名密码3、点开配置添加你的数据变更4、同理,这边也添加如下2个变量。5、添加一个监控面板,这里面可以选择变更,设置别名6、这里添加几个grafana面板,就可以了...
2021-07-16 17:50:57 979
原创 Elasticsearch分片分配不均匀问题记录
ES索引分配不均匀1、查看机器上那快磁盘满了,业务磁盘分布规律目录对应节点/HDATA/1-/HDATA/3ES-1/HDATA/4-/HDATA/6ES-2/HDATA/7-/HDATA/9ES-3/HDATA/10-/HDATA/12ES-42、找到对接进程端口号,规律如下:节点端口ES-19300ES-29301ES-39302ES-493033、查看分片curl -s http://10.
2021-02-28 17:57:21 2135
原创 Grafana 更换主题 + 升级版本
Grafana 更换主题1、正常grafana看板的颜色非常单调,时间长了也会审美疲劳,所以grafana提供可以更换主题的插件,开始之前我这里先贴个对比图吧
2021-02-26 17:30:12 6048 3
postgresql-42.5.0.jar
2023-06-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人