CDH5 Hadoop如何支持读写OSS

最新推荐文章于 2023-11-08 18:24:48 发布
最新推荐文章于 2023-11-08 18:24:48 发布
阅读量559 收藏
点赞数
文章标签： 大数据 shell markdown
原文链接：https://yq.aliyun.com/articles/658473
版权

CDH和CM(Cloudera Manager)

CDH (Cloudera’s Distribution, including Apache Hadoop)是众多Hadoop发行版本中的一种，由Cloudera维护，目前有不少用户使用这个发行版本。CM是管理集群的工具，使用它可以很方便地部署、安装、运维包括Hadoop、Spark、Hive在内的大数据开源组件。
目前，CDH的最新发布的版本是CDH6.0.1，这个发行版本中，Hadoop的版本是3.0.0，天然支持OSS；而CDH5中的Hadoop是2.6，还不支持OSS(目前Apache Hadoop支持OSS的最低版本是2.9.1)。下面将介绍如何使CDH5支持OSS读写。

CDH5支持读写OSS

问题

由于CDH5的httpclient和httpcore这两个组件版本较低(4.2.5)，而OSS SDK要求这两个组件的版本较高。然而Resource Manager要求的httpclient和httpcore必须是低版本。因此，下面提供了一个workaround方案。

搭建CDH集群

首先，我们根据官方文档搭建好CDH集群(这里以CDH 5.14.4为例)；
_2018_10_28_2_02_37

下面的步骤需要在所有的CDH节点执行

下载支持包

http://gosspublic.alicdn.com/hadoop-spark/hadoop-oss-cdh-5.14.4.tar.gz

下载这个版本的CDH支持OSS的支持包并解压，里面的文件是：

[root@cdh-master ~]# ls -lh hadoop-oss-cdh-5.14.4/
总用量 2.7M
-rw-r--r-- 1 root root 114K 10月  8 17:36 aliyun-java-sdk-core-3.4.0.jar
-rw-r--r-- 1 root root 770K 10月  8 17:36 aliyun-java-sdk-ecs-4.2.0.jar
-rw-r--r-- 1 root root 211K 10月  8 17:36 aliyun-java-sdk-ram-3.0.0.jar
-rw-r--r-- 1 root root  13K 10月  8 17:36 aliyun-java-sdk-sts-3.0.0.jar
-rw-r--r-- 1 root root 550K 10月  8 17:36 aliyun-sdk-oss-3.4.1.jar
-rw-r--r-- 1 root root  70K 10月  8 17:36 hadoop-aliyun-2.6.0-cdh5.14.4.jar
-rw-r--r-- 1 root root 720K 10月  8 18:16 httpclient-4.5.2.jar
-rw-r--r-- 1 root root 320K 10月  8 18:16 httpcore-4.4.4.jar

这个支持包是根据CDH5.14.4中Hadoop的版本，并打了Apache Hadoop对OSS支持的patch后编译得到，其他CDH5的小版本对OSS的支持后续也将陆续提供。

部署

将解压后的文件复制到CDH5的安装目录中的jars文件夹中，CDH5的安装目录CDH_HOME(以在/opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3为例)结构是

[root@cdh-master CDH-5.14.4-1.cdh5.14.4.p0.3]# ls -lh
总用量 100K
drwxr-xr-x  2 root root 4.0K 6月  12 21:03 bin
drwxr-xr-x 27 root root 4.0K 6月  12 20:57 etc
drwxr-xr-x  5 root root 4.0K 6月  12 20:57 include
drwxr-xr-x  2 root root  68K 6月  12 21:09 jars
drwxr-xr-x 38 root root 4.0K 6月  12 21:03 lib
drwxr-xr-x  3 root root 4.0K 6月  12 20:57 lib64
drwxr-xr-x  3 root root 4.0K 6月  12 20:51 libexec
drwxr-xr-x  2 root root 4.0K 6月  12 21:02 meta
drwxr-xr-x  4 root root 4.0K 6月  12 21:03 share

[root@cdh-master CDH-5.14.4-1.cdh5.14.4.p0.3]# ls -ltrh jars/
总用量 1.4G
.......
-rw-r--r-- 1 root root  114K 10月 28 14:27 aliyun-java-sdk-core-3.4.0.jar
-rw-r--r-- 1 root root  770K 10月 28 14:27 aliyun-java-sdk-ecs-4.2.0.jar
-rw-r--r-- 1 root root   13K 10月 28 14:27 aliyun-java-sdk-sts-3.0.0.jar
-rw-r--r-- 1 root root  211K 10月 28 14:27 aliyun-java-sdk-ram-3.0.0.jar
-rw-r--r-- 1 root root  550K 10月 28 14:27 aliyun-sdk-oss-3.4.1.jar
-rw-r--r-- 1 root root   70K 10月 28 14:27 hadoop-aliyun-2.6.0-cdh5.14.4.jar
-rw-r--r-- 1 root root  720K 10月 28 14:27 httpclient-4.5.2.jar
-rw-r--r-- 1 root root  320K 10月 28 14:27 httpcore-4.4.4.jar

进入到$CDH_HOME/lib/hadoop目录, 执行如下命令

[root@cdh-master hadoop]# rm -f lib/httpclient-4.2.5.jar
[root@cdh-master hadoop]# rm -f lib/httpcore-4.2.5.jar
[root@cdh-master hadoop]# ln -s ../../jars/hadoop-aliyun-2.6.0-cdh5.14.4.jar hadoop-aliyun-2.6.0-cdh5.14.4.jar
[root@cdh-master hadoop]# ln -s hadoop-aliyun-2.6.0-cdh5.14.4.jar hadoop-aliyun.jar
[root@cdh-master hadoop]# cd lib
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-core-3.4.0.jar aliyun-java-sdk-core-3.4.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-ecs-4.2.0.jar aliyun-java-sdk-ecs-4.2.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-ram-3.0.0.jar aliyun-java-sdk-ram-3.0.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-sts-3.0.0.jar aliyun-java-sdk-sts-3.0.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-sdk-oss-3.4.1.jar aliyun-sdk-oss-3.4.1.jar
[root@cdh-master lib]# ln -s ../../../jars/httpclient-4.5.2.jar httpclient-4.5.2.jar
[root@cdh-master lib]# ln -s ../../../jars/httpcore-4.4.4.jar httpcore-4.4.4.jar
[root@cdh-master lib]# ln -s ../../../jars/jdom-1.1.jar jdom-1.1.jar

进入到Resurce Manager部署节点的$CDH_HOME/lib/hadoop-yarn/bin/目录，将yarn文件中的

CLASSPATH=${CLASSPATH}:$HADOOP_YARN_HOME/${YARN_DIR}/*
CLASSPATH=${CLASSPATH}:$HADOOP_YARN_HOME/${YARN_LIB_JARS_DIR}/*

替换为

CLASSPATH=$HADOOP_YARN_HOME/${YARN_DIR}/*:${CLASSPATH}
CLASSPATH=$HADOOP_YARN_HOME/${YARN_LIB_JARS_DIR}/*:${CLASSPATH}

进入到Resurce Manager部署节点的$CDH_HOME/lib/hadoop-yarn/lib目录，执行

[root@cdh-master lib]# ln -s ../../../jars/httpclient-4.2.5.jar httpclient-4.2.5.jar
[root@cdh-master lib]# ln -s ../../../jars/httpcore-4.2.5.jar httpcore-4.2.5.jar

增加OSS配置

通过CM来增加配置(对于没有CM管理的集群，可以通过修改core-site.xml来达到)
这里以CM为例，需要增加如下配置:
_2018_10_28_2_41_06

配置项值说明
fs.oss.endpoint如 oss-cn-zhangjiakou-internal.aliyuncs.com要连接的endpoint
fs.oss.accessKeyId access key id
fs.oss.accessKeySecret access key secret
fs.oss.implorg.apache.hadoop.fs.aliyun.oss.AliyunOSSFileSystemhadoop oss文件系统实现类，目前固定为这个
fs.oss.buffer.dir/tmp/oss临时文件目录
fs.oss.connection.secure.enabledfalse是否enable https, 根据需要来设置，enable https会影响性能
fs.oss.connection.maximum2048与oss的连接数，根据需要设置

相关参数的解释可以在这里找到

重启集群，验证读写OSS

增加配置后，根据CM提示重启集群，重启后，可以测试

# 测试写
hadoop fs -mkdir oss://{your-bucket-name}/hadoop-test
# 测试读
hadoop fs -ls oss://{your-bucket-name}/

Impala查询OSS中的数据

Impala可以直接查询存储在HDFS的数据，在CDH5支持OSS后，就可以直接查询存储在OSS的数据，由于上面所说的httpclient与httpcore的版本问题，需要在所有部署impala的节点上做如下步骤：
进入到$CDH_HOME/lib/impala/lib，执行如下命令

[root@cdh-master lib]# rm -f httpclient-4.2.5.jar httpcore-4.2.5.jar
[root@cdh-master lib]# ln -s ../../../jars/httpclient-4.5.2.jar httpclient-4.5.2.jar
[root@cdh-master lib]# ln -s ../../../jars/httpcore-4.4.4.jar httpcore-4.4.4.jar
[root@cdh-master lib]# ln -s ../../../jars/hadoop-aliyun-2.6.0-cdh5.14.4.jar hadoop-aliyun.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-core-3.4.0.jar aliyun-java-sdk-core-3.4.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-ecs-4.2.0.jar aliyun-java-sdk-ecs-4.2.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-ram-3.0.0.jar aliyun-java-sdk-ram-3.0.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-java-sdk-sts-3.0.0.jar aliyun-java-sdk-sts-3.0.0.jar
[root@cdh-master lib]# ln -s ../../../jars/aliyun-sdk-oss-3.4.1.jar aliyun-sdk-oss-3.4.1.jar
[root@cdh-master lib]# ln -s ../../../jars/jdom-1.1.jar jdom-1.1.jar

进入到$CDH_HOME/bin目录，修改impalad/statestored/catalogd这三个文件，在文件最后一行exec命令前，增加如下一行

export CLASSPATH=$CLASSPATH:${IMPALA_HOME}/lib/httpclient-4.5.2.jar:${IMPALA_HOME}/lib/httpcore-4.4.4.jar:${IMPALA_HOME}/lib/hadoop-aliyun.jar:${IMPALA_HOME}/lib/aliyun-java-sdk-core-3.4.0.jar:${IMPALA_HOME}/lib/aliyun-java-sdk-ecs-4.2.0.jar:${IMPALA_HOME}/lib/aliyun-java-sdk-ram-3.0.0.jar:${IMPALA_HOME}/lib/aliyun-java-sdk-sts-3.0.0.jar:${IMPALA_HOME}/lib/aliyun-sdk-oss-3.4.1.jar:${IMPALA_HOME}/lib/jdom-1.1.jar

重启所有节点的impala相关进程，这样impala就可以查询OSS的数据。
示例：TPC-DS的benchmark有一张表为call_center，目前假设存储在OSS中，为此，我们可以创建一个外部表指向它，并且查询这张表根据cc_country分组分别有多少条记录

[root@cdh-master ~]# impala-shell -i cdh-slave01:21000
Starting Impala Shell without Kerberos authentication
Connected to cdh-slave01:21000
Server version: impalad version 2.11.0-cdh5.14.4 RELEASE (build 20e635646a13347800fad36a7d0b1da25ab32404)
***********************************************************************************
Welcome to the Impala shell.
(Impala Shell v2.11.0-cdh5.14.4 (20e6356) built on Tue Jun 12 03:43:08 PDT 2018)

The HISTORY command lists all shell commands in chronological order.
***********************************************************************************
[cdh-slave01:21000] > drop table if exists call_center;
Query: drop table if exists call_center
[cdh-slave01:21000] >
[cdh-slave01:21000] > create external table call_center(
                    >       cc_call_center_sk         bigint
                    > ,     cc_call_center_id         string
                    > ,     cc_rec_start_date        string
                    > ,     cc_rec_end_date          string
                    > ,     cc_closed_date_sk         bigint
                    > ,     cc_open_date_sk           bigint
                    > ,     cc_name                   string
                    > ,     cc_class                  string
                    > ,     cc_employees              int
                    > ,     cc_sq_ft                  int
                    > ,     cc_hours                  string
                    > ,     cc_manager                string
                    > ,     cc_mkt_id                 int
                    > ,     cc_mkt_class              string
                    > ,     cc_mkt_desc               string
                    > ,     cc_market_manager         string
                    > ,     cc_division               int
                    > ,     cc_division_name          string
                    > ,     cc_company                int
                    > ,     cc_company_name           string
                    > ,     cc_street_number          string
                    > ,     cc_street_name            string
                    > ,     cc_street_type            string
                    > ,     cc_suite_number           string
                    > ,     cc_city                   string
                    > ,     cc_county                 string
                    > ,     cc_state                  string
                    > ,     cc_zip                    string
                    > ,     cc_country                string
                    > ,     cc_gmt_offset             double
                    > ,     cc_tax_percentage         double
                    > )
                    > row format delimited fields terminated by '|'
                    > location 'oss://{bucket}/call_center';
Query: create external table call_center(
      cc_call_center_sk         bigint
,     cc_call_center_id         string
,     cc_rec_start_date        string
,     cc_rec_end_date          string
,     cc_closed_date_sk         bigint
,     cc_open_date_sk           bigint
,     cc_name                   string
,     cc_class                  string
,     cc_employees              int
,     cc_sq_ft                  int
,     cc_hours                  string
,     cc_manager                string
,     cc_mkt_id                 int
,     cc_mkt_class              string
,     cc_mkt_desc               string
,     cc_market_manager         string
,     cc_division               int
,     cc_division_name          string
,     cc_company                int
,     cc_company_name           string
,     cc_street_number          string
,     cc_street_name            string
,     cc_street_type            string
,     cc_suite_number           string
,     cc_city                   string
,     cc_county                 string
,     cc_state                  string
,     cc_zip                    string
,     cc_country                string
,     cc_gmt_offset             double
,     cc_tax_percentage         double
)
row format delimited fields terminated by '|'
location 'oss://{bucket}/call_center'
Fetched 0 row(s) in 0.07s

[cdh-slave01:21000] > select cc_country, count(*) from call_center group by cc_country;
Query: select cc_country, count(*) from call_center group by cc_country
Query submitted at: 2018-10-28 16:21:13 (Coordinator: http://cdh-slave01:25000)
Query progress can be monitored at: http://cdh-slave01:25000/query_plan?query_id=fb4e09977145f367:3bdfe4d600000000
+---------------+----------+
| cc_country    | count(*) |
+---------------+----------+
| United States | 30       |
+---------------+----------+
Fetched 1 row(s) in 4.71s

其他版本的支持包

CDH5.8.5

http://gosspublic.alicdn.com/hadoop-spark/hadoop-oss-cdh-5.8.5.tar.gz

参考文章

https://yq.aliyun.com/articles/292792?spm=a2c4e.11155435.0.0.7ccba82fbDwfhK
https://github.com/apache/hadoop/blob/trunk/hadoop-tools/hadoop-aliyun/src/site/markdown/tools/hadoop-aliyun/index.md

weixin_33697898
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
CDH安装手册.rar_cdH_hadoop_hadoop安装手册_大数据_安装部署
07-13
Hadoop安装部署手册，使用CDH在线离线部署大数据集群环境
hadoop-2.6.0-cdh5.14.0 hadoop.dll winutils
06-08
一开始使用的是原生的hadoop2.6.0编译的hadoop.dll，但是一直遇到这个问题Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 所以自己就用cdh的hadoop源码编译了一遍，踩了很多坑。最终还是解决了，能在windows中调试mapreduce了。 ps:csdn上看到同样的资源 竟然要10分，下不起 下不起。只能自己做了，5分服务大众。。。
CM5和CDH5 搭建Hadoop 集群
03-30
详细安装过程，各种报错和问题的解决方法。步骤很清晰。
CDH5 Hadoop集群完全离线安装说明
08-14
CDH5 Hadoop集群完全离线安装说明
spark访问OSS文件时POM文件配置和使用方法
Toby的博客
07-07 907
1、spark如果要访问OSS文件，需要在POM.xml文件中添加一些依赖。 要添加的依赖是： （1）hadoop-jfs （2）jss-sdk-java 添加方法，在<dependencies>...</dependencies>中添加 <dependency> <groupId>org.apache.hadoop</groupId> <art
修改 Spark 支持远程访问OSS文件
半日闲的博客
02-01 1595
编译特定版本Hadoop访问OSS的Jar包 目前Hadoop trunk 分支已经包含了hadoop-aliyun模块的代码，hadoop已经默认支持aliyun oss的访问支持。但是我们公司的hadoop版本还是CDH5的分支版本，默认是没有oss支持的。 通过下载官方提供的hadoop-aliyun.jar包放到Hadoop中，发现高版本的hadoop-aliyun.jar依赖于高版本的httpclient.jar 和高版本的httpcore.jar, 高版本和低版本造成类访问冲突。 无奈之下，尝试
通过CDH5 Hadoop读取和写入OSS数据
我思，故我在！--My data life
03-21 1709
本页目录 准备工作 步骤一：增加 OSS 配置 步骤二：配置 Impala 对 OSS 的支持 验证配置 参考文档 CDH（Cloudera's Distribution, including Apache Hadoop）是众多 Hadoop 发行版本中的一种，最新版本 CDH6.0.1 中的 Hadoop3.0.0 版本已经支持 OSS。CDH5 中的 Hadoop2.6 版本不支持...
Aliyun - OSS工具ossutil使用
Jesse技术博客
08-13 3708
最近项目中有个需求，要求把的备份上传到OSS上，之前使用过py脚本，但是没有研究出来如果上传空文件夹的问题，所有使用阿里云封装好的类，然后在shell或者py脚本中直接调用来执行。 下载： wget http://gosspublic.alicdn.com/ossutil/1.6.5/ossutil64 安装： 增加执行的权限:chmod +x ossutil64 生成配置文件： ./os...
阿里云服务器18个数据中心测试IP地址以及测试方法
weixin_33922672的博客
10-09 1065
我们用户在选择阿里云服务器的时候是不是感觉阿里云的数据中心太多太多，确实阿里云服务器机房是有很多，国外国外机房大约有18个，甚至更多，因为还在不断的增加机房。对于商家而言增加不同的机房可以满足不同的项目和地区用户需要。其次，我们有些用户项目也是需要多机房的。 在众多机房中，对于新选择阿里云服务器的用户来说确实是比较难以选择。因为我们不清楚各个机房的速度如何。所以，在这篇文章中，云部落有找到阿...
阿里云OSS存储
qq_50990903的博客
05-22 1079
OSS 1.pom.xml依赖 <dependency> <groupId>com.aliyun.oss</groupId> <artifactId>aliyun-sdk-oss</artifactId> <version>2.8.3</version> </dependency> 2.aliyun.properties aliyun.endpoint = http://oss-cn-z
aliyun-sdk-oss-3.11.1.jar
02-24
使用阿里云oss对象存储所需的jar包
CDH5Hadoop发行版离线安装手册.docx
10-29
CDH5 Hadoop发行版离线安装手册，亲自实验的经验总结
HDP2.6 Hadoop如何支持读写OSS
weixin_34417183的博客
10-29 366
HDP和Ambari HDP(Hortonworks Data Platform)是由Hortonworks发行的大数据平台，里面包含了Hadoop、Hive、HBase等很多开源组件，目前有不少用户直接使用HDP版本的Hadoop。Ambari是一个分布式工具，可以安装、管理，监控HDP平台。HDP与Ambari的关系，可以类比CDH与CM的关系。目前...
使用Apache Impala(CDH6)查询OSS的数据
weixin_34321977的博客
10-30 608
CDH6 目前CDH的最新版本是6.0.1，支持Hadoop 3.0.0，本文将介绍如何使CDH6的相关组件(Hadoop/Hive/Spark/Impala等)能够读写OSS。CDH5对OSS的支持在这篇文章介绍。 CDH6支持读写OSS 搭建CDH集群 首先根据官方文档搭建好CDH6集群 增加OSS配置 通过CM来增加配置(对于没有CM管理的集群，...
pyspark支持阿里云oss对象存储系统
最新发布
qq_25278637的博客
11-08 226
说明4：hadoop2.9.1之前的版本要想支持oss文件存储系统，则需要hadoop-aliyun-hadoop版本号.jar的支持包以及这个包的依赖包，而对于cdh版本的hadoop，还需要做到与cdh版本的兼容（本文档后面会提供几个cdh5.x版本的支持包，而对于cdh6,都是hadoop3.x的版本，是默认有支持包的，支持包位置一般在/opt/cloudera/parcels/CDH/jars里面，所以无需再寻找支持包，只需要按照说明3的步骤进行配置即可）。（注意将jar包的路径指定为自己的路径。
Spark读写OSS并使用OSS Select来加速查询
黑马程序员广州中心的专栏
11-12 658
Spark读写OSS 基于这篇文章搭建的CDH6以及配置，我们来使Spark能够读写OSS(其他版本的Spark都是类似的做法，不再赘述)。 由于默认Spark并没有将OSS的支持包放到它的CLASSPATH里面，所以我们需要执行如下命令下面的步骤需要在所有的CDH节点执行 进入到$CDH_HOME/lib/spark目录, 执行如下命令 [root@cdh-master spark...
Spark 与 OSS
dinl_vin的博客
08-20 968
Spark 与 OSS 前言 因为公司使用的是阿里云全家桶,OSS基本上就是唯一的神,取代了HDFS成为统一文件系统,n多的数据也通过阿里亲儿子Flink接到了数仓,但是因为上报方偶尔一波离谱数据,似乎是在做压测? 而我们Flink开发同学图省事没有做错误处理,导致flink大姨妈的时候,重启消费数据重复(这里也看得出来所谓的Exact-Once也不是完全端到端精确,假如sink跟source没有特殊处理的话还是有重复的). spark: 你们要抓的是鲁迅flink,关我周树人spark什么事?,流批不分家
阿里云端渲染系列-第1篇：公网方式下的云端渲染
weixin_34220834的博客
11-22 1296
目 录 1.文档介绍 12.基本知识点 12.1. 渲染环境 12.2. 常见制作软件（略） 12.3. 常见渲染器（略） 23.云产品介绍 23.1. VPC 23.2. VPN 23.3. 高速通道 23.4. ECS 23.5. BCS ...
手把手教你使用 OSS-HDFS 服务平替自建 HDFS
阿里云云栖号
08-07 758
OSS-HDFS 服务是一款基于对象存储OSS之上的云原生数据湖3.0存储产品，基于统一的元数据管理能力，在完全兼容 HDFS 文件系统接口的同时，提供充分的 POSIX 能力支持，能更好的满足大数据和 AI 领域丰富多样的数据湖计算场景，只需要简的配置即可平替自建HDFS实现低成本、高弹性、高稳定的云上架构。
CDH部署 hadoop
08-17
您好！对于CDH（Cloudera Distribution for Hadoop）的部署和Hadoop的安装和配置，可以按照以下步骤进行操作： 1. 准备环境：确保您的服务器满足CDH的硬件和软件要求。您可以参考Cloudera官方文档中的系统要求来进行设置。 2. 下载CDH：从Cloudera官方网站下载CDH的二进制安装包。选择适合您系统的版本和发布日期。 3. 安装CDH：解压下载的安装包，并按照Cloudera提供的文档进行安装。通常情况下，您需要运行一个shell脚本来启动安装过程。 4. 配置CDH：在CDH安装完成后，您需要进行一些配置。这包括配置Hadoop的核心组件（如HDFS和YARN）、设置网络参数和配置用户访问权限等。 5. 启动CDH服务：一旦配置完成，您可以启动CDH服务。使用Cloudera提供的命令行工具或Web界面，您可以启动、停止和管理各个服务。 6. 验证部署：通过访问Cloudera管理界面或运行一些Hadoop命令，您可以验证CDH部署的正确性。确保各个服务正常运行并且可以访问到数据。 以上是一个大致的CDH部署过程，具体操作可能会根据您的环境和需求有所不同。建议您参考Cloudera官方文档中的详细指南，以确保正确地部署和配置CDH。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值