Hadoop的安装

本文详细介绍了Hadoop的安装过程,强调了JDK配置和主机名映射的重要性,以及配置文件对Hadoop性能的影响。同时,提到了权限设置、防火墙关闭和开机启动的注意事项。还概述了Hadoop目录结构和关键配置文件,包括默认和用户自定义的配置文件,以及如何覆盖默认参数。最后,指出了启动Hadoop时指定配置文件目录的方法。
摘要由CSDN通过智能技术生成

一、安装Hadoop

  1. Hadoop运行的前提是本机已经安装了JDK,配置JAVA_HOME变量

  2. 在Hadoop中启动多种不同类型的进程
    例如NameNode,DataNode,ResourceManager,NodeManager,这些进程需要进行通信。
    在通信时,常用主机名进行通信。
    需要在集群的每台机器上,配置集群中所有机器的host映射。
    配置:
    Linux: /etc/hosts
    Windows: C:\Windows\System32\drivers\etc\hosts
    如果不配会报错:
    DNS映射异常,HOST映射异常

  3. 注意权限
    hadoop框架在运行需要产生很多数据(日志),数据的保存目录,必须让当前启动hadoop进程的用户拥有写权限。

  4. 关闭防火墙,设置开机不自启动
    service iptables stop
    chkconfig iptables off

二、Hadoop目录介绍

#查看目录结构

[wuyik@hadoop101 hadoop-2.7.2]$ ll
总用量 52
drwxr-xr-x. 2 wuyik wuyik  4096 5月  25 2020 bin
drwxr-xr-x. 3 wuyik wuyik  4096 5月
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值