Hadoop

（一）启动4个进程
1.namenode------hdfs启动2.datanode—3.resourcemanager----------yarn启动4.nodemanager--------HDFS架构概述1)NameNode(nn)：存储文件的元数据，如文件名，文件目录结构，文件属性（生成时间、副本数、文件权限），以及每个文件的块列表和块所在的DataNode等。2)DataNode(dn):在本地文件系统存储文件块数据，以及块数据的校验和。3)Secondary NameNode(2nn)：每隔一段时间对NameNode元数据备份。(二)浏览器登录1.http://自己的IP地址:8088192.168.1.100http://自己的IP:98702.连接失败不通①查看配置②防火墙关闭（三）在hdfs上创建文件夹命令：hdfs dfs -mkdir-p目录名—----—#业精于勤，荒于嬉；行成于思，毁于随——韩愈#（四）将文件上传到hdfs上命令apche-zookeeeper安装部署/opt/sofave中解压到/opt/module中1、解压cd/opt/module/tar-zxvfapache-zookeeper-3.5.5-bin.tar.gz2、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和logcd/opt/module/apache-zookeeper-3.5.5-bin/mkdirdatamkdirlog3、拷贝配置文件cd/opt/module/apache-zookeeper-3.5.5-bin/conf/cpzoo_sample.cfgzoo.cfg配置文件更改#Thenumbe4、创建服务器myid在data目录下创建一个myid的文件里面的值可以给个任意的值，但要和上述服务起server.x对应cd/opt/module/apache-zookeeper-3.5.5-bin/data/touchmyid5、集群拷贝scp-r/opt/module/apache-zookeeper-3.5.5-binroot@hadoop101:/opt/module/apache-zookeeper-3.5.5-binscp-r/opt/module/apache-zookeeper-3.5.5-binroot@hadoop102:/opt/module/apache-zookeeper-3.5.5-bin6、集群myid更改进入到每个节点，修改myid值集群系统环境变量添加：vi/etc/profileexportZOOKEEPER_HOME=/opt/module/apache-zookeeper-3.5.5-binexportPATH=SPATH:$ZOOKEEPER_HOME/bin保存系统环境变量：source/etc/profile关闭集群防火墙7、集群启动进入到每个节点启动cd/opt/module/apache-zookeeper-3.5.5-binzkServer.shstartzkServer.shstatuszkCli连接验证zkCli.sh-serverhadoop100:2181