hadoop学习总结一

 网关和ip配置

/etc/sysconfig/network-scripts/ifcfg-ens33
/etc/hostname

 系统环境变量：

#这里的所有脚本都会被系统执行
/etc/profile.d
/etc/profile.d/sh.local


自定义环境变量
在/etc/profile.d 新建  my_hadoop.sh

#JAVA_HOME
export  JAVA_HOME=
export  HADOOP_HOME=
export  PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin

网关地址：192.168.118.2

node1:192.168.118.100

node2:192.168.118.120

node3:192.168.118.130

MAC:

00:0C:29:C7:59:6B

00:0C:29:05:47:66

00:0C:29:CD:DB:BF

IPADDR=192.168.118.120

GATEWAY=192.168.118.2

NETMASK=255.255.255.0

DMS1=8.8.8.8

static

8088 yarn集群端口号

50070 端口号

http://192.168.118.100:8088/cluster

http://192.168.118.100:9870/dfshealth.html#tab-overview

namenode如果不格式化，无法启动

bin/hdfs namenode -format

http://192.168.118.100:9870/explorer.html#/

文件上传： 

hdfs dfs -put /data/world6.jpg /test

不要频繁执行格式化操作（./hdfs namenode -format//）