Cloudera
包括CDH、HDP
Richard123m
行百里者半九十
展开
-
CDH 3 - 添加Flink Service
1. 安装前准备在https://archive.cloudera.com/csa/下载下列包 FLINK-1.9.0-csa1.0.0.0-cdh6.3.0.jar FLINK-1.9.0-csa1.0.0.0-cdh6.3.0-el7.parcel FLINK-1.9.0-csa1.0.0.0-cdh6.3.0-el7.parcel.sha manifest.json2. ...原创 2020-05-05 20:49:36 · 307 阅读 · 0 评论 -
CDH 2 - 添加phoenix服务
1. 安装前准备到https://archive.cloudera.com/phoenix/6.2.0/ 下载以下包,并放至相关位置# 将下列包放至httpd的/var/www/html/cloudera-repo/parcel/phoenix[cdh@c123m phoenix]$ ll -htotal 384M-r-xr-xr-x 1 root root 2.5K Apr 28 22...原创 2020-04-30 17:40:22 · 295 阅读 · 0 评论 -
Ambari 记录 - Agent SSLError
SSLError: Failed to connect. Please check openssl library versions.错误描述: 在查看agent的日志时,发现报错 SSLError: Failed to connect. Please check openssl library versions.解决方法: 1.查看openssl版本:openssl version如果低于 openssl-1.0.1e-16.el6.x86_64 版本,则需要更新到 o.转载 2021-09-30 10:31:27 · 226 阅读 · 0 评论 -
Ambari Custom Service 5 - 启动顺序
一、Role Command Order 角色是组件的另一个名称(例如:NAMENODE,DATANODE,RESOURCEMANAGER,HBASE_MASTER等)。 顾名思义,可以告诉Ambari关于应该为堆栈中定义的组件运行命令的顺序。 例如:“应在启动NameNode之前启动ZooKeeper服务器”。或者“只有在NameNode和DataNodes启动后才能启动HBase Master”。 这可以通过在stack-version文件夹中包含role_command_order.json文件转载 2020-10-20 10:12:38 · 299 阅读 · 0 评论 -
Ambari Custom Service 4 - 获取集群参数值
自定义服务python脚本依赖的模块是resource_management,该模块的位置在/usr/lib/ambari-agent/lib/resource_management,ambari的自定义服务程序环境就是依赖的这个目录。如何获取集群内的一些参数值获取ambari-server所在的主机,即主节点from resource_management.libraries.sc...原创 2020-03-31 15:06:39 · 2376 阅读 · 0 评论 -
Ambari Custom Service 3 - 脚本干货
背景Ambari是一个强大的大数据集群管理平台。在实际使用中,我们使用的大数据组件不会局限于官网提供的那些。如何在Ambari中集成进去其他组件呢?Stacks & ServicesStack为一系列service的集合。可以在Ambari中定义多个不同版本的stacks。比如HDP3.1为一个stack,可以包含Hadoop, Spark等等多个特定版本的service。...转载 2020-02-16 09:48:40 · 963 阅读 · 0 评论 -
Ambari Custom Service 2 - metainfo.xml
Metainfo.xml声明性定义Ambari服务。这是服务定义最关键的文件。下面说明Metainfo.xml各部分的作用。描述服务<service>的字段包括:属性 描述 name 服务名,必须唯一 displayName 服务在web UI上的显示名 extends 继承以前的版本 version 服务版本,用name和vers...转载 2020-02-14 16:18:14 · 179 阅读 · 0 评论 -
Ambari Custom Service 1 - 步骤概述
自定义服务包含以下步骤:1 创建服务文件夹2 创建描述服务信息的Metainfo.xml3 创建关于安装、配置、启动、停止等命令的脚本4 给自定义服务添加配置自定义服务定义完成以后重启server就能在添加服务中找到自定义服务命令:ambari-server restart实现自定义服务例子在本例子中创建一个服务SAMPLESRV,包括三个组件MASTER, ...转载 2020-02-14 15:44:28 · 583 阅读 · 0 评论