Hadoop22：Hadoop在CDH和HDP中的使用

最新推荐文章于 2024-07-21 00:31:35 发布
最新推荐文章于 2024-07-21 00:31:35 发布
阅读量1.5k 收藏 9
点赞数 4
分类专栏： hadoop 文章标签： hdfs hadoop mr
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40612128/article/details/123233925
版权
hadoop 专栏收录该内容
57 篇文章 2 订阅 ¥59.90 ¥99.00
订阅专栏
本文介绍了在CDH和HDP环境中使用Hadoop的步骤。通过解压和使用VMware打开预装的CDH和HDP虚拟机，演示了如何在CDH中查看已启动的服务，以及HDFS和YARN的Web界面。强调了CDH和HDP作为大数据平台，Hadoop只是其中之一。同时，文章提到了在HDP中通过Ambari管理界面进行组件管理和命令行操作HDFS的方法。
摘要由CSDN通过智能技术生成

一、Hadoop在CDH和HDP中的使用

咱们前面学习了官方的Apache Hadoop版本，我们前面也说了，在实际工作中其实会使用CDH或者HDP，那下面我们就看一下在CDH和HDP中如何操作Hadoop。

注意了，在这里我不打算讲CDH和HDP的安装部署，意义不大，咱们是开发人员，主要侧重于代码开发，安装部署的工作是运维人员的，咱们不能抢饭碗啊，什么都让你做了，别人不就得喝西北风啊，这样太不地道了，对吧。

如果确实想了解CDH是怎么安装的，看下面我整理的CDH集群以及单机部署

大数据平台安装部署–CDH6.2版本【集群】
大数据平台安装部署–CDH6.2版本单机

不过我们在这里要演示，肯定先安装部署了，在这里给大家分享一个好东西，不要告诉别人哦，这里面的东西目前到官网都下载不到了，没有下载链接了ÿ

了解本专栏 订阅专栏 解锁全文
做一个有趣的人Zz
关注
  • 4
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 3
    评论
专栏目录
订阅专栏
Hadoop100：大数据平台安装部署--CDH6.2版本【集群】
weixin_40612128的博客
02-02 5983
1：CDH介绍 CDH是Cloudera的100％开源平台发行版，包括Apache Hadoop，专为满足企业需求而构建。CDH提供开箱即用的企业使用所需的一切。通过将Hadoop与十几个其他关键的开源项目集成，Cloudera创建了一个功能先进的系统，可帮助您执行端到端的大数据工作流程。 简单来说：CDH 是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具（软件），使得集群的安装可以从几天的时间缩短为几个小时，运维人数也会从数十人降低到几个人，极大的提高了集群管理的效率。 2：CDH现状分
0593-CDH5与CDH6对比
Hadoop_SC的博客
11-08 3650
1 文档编写目的 Cloudera于2018年8月30日正式发布CDH6.0.0，至2019年2月19日，最新的迭代版本为CDH6.1.1，可能马上就会发布CDH6.2。CDH6是基于Hadoop3同时包含大量其他组件的大版本更新的发布版本，许多用户考虑到未来CDH的版本主要是基于C6，而CDH5会慢慢的停止更新，所以考虑新搭集群使用CDH6，或者想把已有的CDH5集群升级到CDH6。第一个问题就...
HDP与CDH
rentian1的博客
01-21 3009
一、 Hadoop版本 目前Hadoop发行版本非常多，我个人接触的有HDP和CDH，Hortonworks版本（Hortonworks Data Platform，简称“HDP”），Cloudera版本（Cloudera Distribution Hadoop，简称“CDH”），还有其他的版本，目前中国公司我发现用的CDH版本较多，至于什么原因我也不是很清楚，不知道是不是跟风，从我个人的角度使...
cdh 查询组件的版本信息
最新发布
hxsln11的博客
07-21 648
对于已安装好CDH的集群，可以通过CDH管理界面查看。2.选择主节点的组件。
HDP方式构建Hadoop集群
qq_30450401的博客
01-09 1628
本文通过离线安装 简述： 安装包 ambari-2.6.2.0-centos7.tar.gz HDP-2.6.3.0-centos7-rpm.tar.gz HDP-UTILS-1.1.0.21-centos7.tar.gz 服务器： 192.168.31.72 192.168.31.73 192.168.31.74 关闭防火墙：systemctl stop firewalld.service 禁用防火墙：systemctl disable firewalld.service 查看防火墙.
简述Apache Hadoop、CDH及HDP
数据库生态圈（RDB & NoSQL & Bigdata）——专注于关系库优化（Oracle&Mysql&PG&SQL Server ）
08-07 1100
一.概述 当前，hadoop发行版众多，其中包括华为发行版（收费）、Intel发行版（收费）、Cloudera发行版（Cloudera’s Distribution Including Apache Hadoop，简称 CDH，免费），Hortonworks发行版（Hortonworks Data Platform，简称 HDP，免费）等，这些发行版都是基于Apache Hadoop衍生而来。之所以衍生出如此众多发行版本，主要还是因为Apache Hadoop的开源协议：任何人可以对其进行修改，并作为开源或
Hadoop版本：CDH, HDP, MapR
weixin_34413103的博客
01-21 222
Hadoop版本：CDH, HDP, MapR 学习了：http://dongxicheng.org/mapreduce-nextgen/hadoop-distribution-selection/ https://www.cnblogs.com/jinhaolin/p/6750295.html http://blog.csdn.net/xiangxizhishi/article/details/...
从CDH和HDP到CDP看大数据平台架构的演进.pptx
01-18
CDH（Cloudera Distribution of Apache Hadoop）和HDP（Hortonworks Data Platform）是两个主要的大数据平台架构，而CDP（Cloudera Data Platform）是最新的一代大数据平台架构。 大数据平台架构的演进是由于大数据...
CDH和Hadoop的区别
weixin_49539546的博客
03-14 5005
1.hadoop有几个版本？ 2.CDH有几种安装方式？ 3.CDH在安装认证方面做了什么改变？ ---------------------------------------------------------------------------------------------------------------------------- Cloudera的CDH和Apache的Hadoop的区别 目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有.
CDH/HDP迁移星环大数据产品TDH
.
06-02 1379
通过8种独立的存储引擎，支持业界主流的10种存储模型：关系型数据存储、宽表存储、搜索引擎、地理空间 存储、图存储、键值存储、事件存储、时序存储、文本存储、对象存储。星环科技TDH已完成与主流信创生态厂商的适配互认工作，适配长城飞腾、华为泰山、浪潮等服务器，鲲鹏、飞腾CPU，麒麟、统信等OS，并有官方认证，支持基于ARM与X86服务器服务器混合部署并有落地案例，满足信创验收要求。TDH的多模架构，支持关系表、文本、时空地理、图数据、文档、时序等在内的10种数据模型；整个易用性、开发效率和运行效率都提高很多。
HDP-HADOOP安装手册2.5--HA集群.doc
06-20
本文档用于 Hadoop-Hdp的生产、测试环境部署。已成功部署超过20个节点的生产集群。支持HA高可用。
Amabri 2.4安装HDP2.5（hadoop）
01-30
很详细的Hadoop安装配置文档，经过实践检验。。。。。。。
Hadoop集群HDP-2.6.4的部署
08-09
本文档详细描述了ambari-server的安装以及如何使用ambari安装HDP版本的大数据集群包括Hadoop，hbase，hive，spark等所有大数据组件的安装
hadoop CDH
热门推荐
小海的专栏
02-07 3万+
CDH 1、CDH简介 CDH：全称Cloudera’s Distribution Including Apache Hadoop　　CDH版本衍化　　hadoop是一个开源项目，所以很多公司在这个基础进行商业化，Cloudera对hadoop做了相应的改变。　　Cloudera公司的发行版，我们将该版本称为CDH(Cloudera Distribution Hadoop)。
Cloudera Manager(CDH) VS Ambari(HDP)
顺其自然~专栏
08-09 1099
CDH (Cloudera’s Distribution, including Apache Hadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成了很多补丁，可直接用于生产环境。HDP(Hortonworks Data Platform)是hortworks推出的100%开源的hadoop发行版本，以YARN 作为其架构中心，包含pig、hive、phoniex、hbase、storm、spark等大量组件。（2019年时的文章）
【大数据】大数据 Hadoop 管理工具 Apache Ambari（HDP）
匠人精神，持之以恒！
06-13 4440
Apache Ambari 是 Hortonworks 贡献给Apache开源社区的顶级项目，它是一个基于web的工具，用于安装、配置、管理和监视 Hadoop 集群。 Ambari 目前已支持大多数 Hadoop 组件，包括 HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop 和 Hcatalog 等。
CDH/HDP迁移之路
Transwarp
04-02 3528
图片 哪些用户需要迁移 图片 原社区版用户 社区版不再更新 Cloudera(Cloudera 和Hortonworks 合并后)所有产品不再提供社区版，用户无法获取新的功能。 社区版不再免费 2021年1月31日开始，所有Cloudera软件都需要有效的订阅，且订阅费昂贵（50个节点，一年订阅费50万美元）。 原企业版用户 企业版不再更新 Cloudera 和Hortonworks 合并后推出了新一代大数据平台 CDP，CDH 6和HDP 3将是CDH和HDP的最后企业版本，..
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

做一个有趣的人Zz

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值