(一)启动4个进程
1.namenode------hdfs启动2.datanode—3.resourcemanager----------yarn启动4.nodemanager--------HDFS架构概述1)NameNode(nn):存储文件的元数据,如文件名,文件目录结构,文件属性(生成时间、副本数、文件权限),以及每个文件的块列表和块所在的DataNode等。2)DataNode(dn):在本地文件系统存储文件块数据,以及块数据的校验和。3)Secondary NameNode(2nn):每隔一段时间对NameNode元数据备份。(二)浏览器登录1.http://自己的IP地址:8088192.168.1.100http://自己的IP:98702.连接失败不通①查看配置②防火墙关闭(三)在hdfs上创建文件夹命令:hdfs dfs -mkdir-p目录名—----—#业精于勤,荒于嬉;行成于思,毁于随——韩愈#(四)将文件上传到hdfs上命令apche-zookeeeper安装部署/opt/sofave中解压到/opt/module中1、解压cd/opt/module/tar-zxvfapache-zookeeper-3.5.5-bin.tar.gz2、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和logcd/opt/module/apache-zookeeper-3.5.5-bin/mkdirdatamkdirlog3、拷贝配置文件cd/opt/module/apache-zookeeper-3.5.5-bin/conf/cpzoo_sample.cfgzoo.cfg配置文件更改#Thenumbe4、创建服务器myid在data目录下创建一个myid的文件里面的值可以给个任意的值,但要和上述服务起server.x对应cd/opt/module/apache-zookeeper-3.5.5-bin/data/touchmyid5、集群拷贝scp-r/opt/module/apache-zookeeper-3.5.5-binroot@hadoop101:/opt/module/apache-zookeeper-3.5.5-binscp-r/opt/module/apache-zookeeper-3.5.5-binroot@hadoop102:/opt/module/apache-zookeeper-3.5.5-bin6、集群myid更改进入到每个节点,修改myid值集群系统环境变量添加:vi/etc/profileexportZOOKEEPER_HOME=/opt/module/apache-zookeeper-3.5.5-binexportPATH=SPATH:$ZOOKEEPER_HOME/bin保存系统环境变量:source/etc/profile关闭集群防火墙7、集群启动进入到每个节点启动cd/opt/module/apache-zookeeper-3.5.5-binzkServer.shstartzkServer.shstatuszkCli连接验证zkCli.sh-serverhadoop100:2181
Hadoop
最新推荐文章于 2022-12-07 09:18:43 发布