HADOOP
文章平均质量分 76
大数据
gblfy
心如向阳,次第花开!
展开
-
Hadoop集群安装部署_分布式集群安装_02
文章目录一、上传与 解压1. 上传安装包2. 解压hadoop安装包二、修改hadoop相关配置文件2.1. hadoop-env.sh2.2. core-site.xml2.3. hdfs-site.xml2.4. mapred-site.xml2.5. yarn-site.xml2.6. workers2.7. 修改启动脚本三、同步初始化3.1. 安装包同步3.2. 主节点格式化HDFS3.3. 启动集群3.4. 验证集群3.5. webui一、上传与 解压首先在bigdata01节点上安装。1.原创 2021-07-03 11:39:58 · 277 阅读 · 1 评论 -
Hadoop集群安装部署_分布式集群安装_01
文章目录伪分布集群搞定了以后我们来看一下真正的分布式集群是什么样的看一下这张图,图里面表示是三个节点,左边这一个是主节点,右边的两个是从节点,hadoop集群是支持主从架构的。不同节点上面启动的进程默认是不一样的。下面我们就根据图中的规划实现一个一主两从的hadoop集群环境准备:三个节点主机名ipbigdata01192.168.92.100bigdata02192.168.92.101bigdata03192.168.92.102注意:每个节点原创 2021-07-03 11:08:46 · 273 阅读 · 1 评论 -
Hadoop集群安装部署_伪分布式集群安装_02
文章目录一、解压安装1. 安装包上传2. 解压hadoop安装包二、修改Hadoop相关配置文件2.1. hadoop-env.sh2.2. core-site.xml2.3. hdfs-site.xml2.4. mapred-site.xml2.5. yarn-site.xml2.6. workers三、格式化与启动集群3.1. 格式化HDFS3.2. 启动伪分布集群3.3. 异常解决方案3.4. 再启动集群3.5. 验证集群进程信息3.6. web页面3.7. 域名访问3.8. 停止集群一、解压安装原创 2021-07-02 22:46:51 · 371 阅读 · 1 评论 -
Hadoop集群安装部署_伪分布式集群安装_01
文章目录一、配置基础环境1. 设置静态ip2. hostname3. firewalld4. ssh免密码登录5. JDK一、配置基础环境1. 设置静态ip[root@bigdata01 ~]# vi /etc/sysconfig/network-scripts/ifcfg-ens33BOOTPROTO="static"IPADDR=192.168.92.100GATEWAY=192.168.92.2DNS1=192.168.92.2[root@bigdata01 ~]# service原创 2021-07-02 22:05:59 · 235 阅读 · 1 评论 -
hadoop 下载
原创 2021-07-02 20:30:11 · 157 阅读 · 0 评论