Hadoop基础操作

克隆新增服务器基础操作

1、修改服务器IP地址 ,先su切换root用户，修改IP地址

vim /etc/sysconfig/network-scripts/ifcfg-ens33

​
2、修改主机名

vim /etc/hostname

3、删除节点信息。 在Hadoop目录下

 rm -rf data/ logs

按需修改xsync分配脚本，jpsall查询启动组件脚本（xsync和jpsall为自己写的脚本。xsync用于向各节点分发文件，jpsall用于对所有服务器查看java进程）

4、在设置了namenode, resourcemanager的hadoop分配免密钥匙, 在主目录下

cd .ssh/   
ssh -copyid 新增的hadoop主机名

5、新增白名单

6、新增workers 在hadoop的/etc/hadoop目录

vim workers

7、格式化hdfs 在hadoop目录

hdfs namenode -format

开启关闭hdfs/yarn

在hadoop目录下

sbin/start-dfs.sh    
sbin/stop-dfs.sh
sbin/start-yarn.sh		
sbin/stop-yarn.sh

开启关闭组件

hdfs --daemon start namenode	
hdfs --daemon stop namenode

hdfs --daemon start datanode	
hdfs --daemon stop datanode

hdfs --daemon start secondarynamenode	
hdfs --daemon stop secondarynamenode

yarn --daemon start nodemanager	
yarn --daemon stop nodemanager

yarn --daemon start resourcemanager	
yarn --daemon stop resourcemanager

mapred --daemon start historyserver	
mapred --daemon stop historyserver

杀死进程

kill -9 6964 (杀死namenode)