复习Hadoop基础,集群的启动以及信息查看

哦头大哦真是,距离课程结束一年多了,连集群都忘记怎么启动了wuwuw

  1. Hadoop的优势:
    • 高可靠: 数据不会丢失(数据副本)
    • 高扩展: 多个集群超多个节点
    • 高容错: 任务出错中断了 也还会再重新执行
  2. Hadoop组成
    • Yarn:负责资源调度分配
    • MapReduce:负责计算
    • Hdfs : 文件存储系统
  3. Hadoop运行模式
    • 本地模式
    • 伪分布式
    • 完全分布式
  4. 环境搭建:Hadoop本地模式安装和分布式模式安装详细步骤
  5. 群起集群:
    1. 启动hdfsstart-dfs.sh :datanode&namenode
    2. 启动yarnstart-yarn.sh:ResourceManager&NodeManager
  6. 端口号
    • 50090:查看SecondaryNameNode信息在这里插入图片描述
    • 50070:查看namenode信息在这里插入图片描述
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值