Hadoop

(一)启动4个进程
1.namenode— -hdfs启动
2.datanode----
3.resourcemanager----------yarn启动
4.nodemanager-------- ——HDFS架构概述1)NameNode(nn):存储文件的元数据,如文件名,文件目录结构,文件属性(生成时间、副本数、文件权限),以及每个文件的块列表和块所在的DataNode等。2)DataNode(dn):在本地文件系统存储文件块数据,以及块数据的校验和。3)Secondary NameNode(2nn):每隔一段时间NameNode元数据备份。
(二)浏览器登录1.http://自己的IP地址:8088192.168.1.100 http://自己的IP:98702.连接失败不通①查看配置②防火墙关闭
(三)在hdfs上创建文件夹命令:hdfs dfs -mkdir -p 目录名————————————————————————————#业精于勤,荒于嬉;行成于思,毁于随——韩愈#—————————————————————————————————————
(四)将文件上传到hdfs上命令apche-zookeeeper安装部署/opt/sofave中解压到/opt/module中
1、解压cd/opt/module/tar-zxvfapache-zookeeper-3.5.5-bin.tar.gz
2、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和logcd/opt/module/apache-zookeeper-3.5.5-bin/mkdirdatamkdirlog
3、拷贝配置文件cd/opt/module/apache-zookeeper-3.5.5-bin/conf/cpzoo_sample.cfgzoo.cfg配置文件更改#Thenumbe
4、创建服务器myid在data目录下创建一个myid的文件里面的值可以给个任意的值,但要和上述服务起server.x对应cd/opt/module/apache-zookeeper3.5.5-bin/data/touchmyid5、集群拷贝scp-r/opt/module/apache-zookeeper-3.5.5-binroot@hadoop101:/opt/module/apache-zookeeper-3.5.5binscpr/opt/module/apache-zookeeper-3.5.5binroot@hadoop102:/opt/module/apache-zookeeper-3.5.5-bin
6、集群myid更改进入到每个节点,修改myid值集群系统环境变量添:加:vi/etc/profileexportZOOKEEPER_HOME=/opt/module/apache-zookeeper-3.5.5-binexportPATH= P A T H : PATH: PATH:ZOOKEEPER_HOME/bin保存系统环境变source/etc/profile关闭集群防火墙
7、集群启动进入到每个节点启动cd/opt/module/apache-zookeeper3.5.5-binzkServer.shstartzkServer.shstatuszkCli连接验证zkCli.sh-serverhadoop100:2181

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值