Hadoop的安装

最新推荐文章于 2024-10-17 12:47:22 发布
最新推荐文章于 2024-10-17 12:47:22 发布
阅读量240 收藏 3
点赞数
分类专栏： java 文章标签： hadoop 大数据 hdfs java 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_67392409/article/details/126666853
版权

安装前准备

创建一台虚拟机

创建过程不再展示，可以看之前的文章

关闭防火墙，设置开机自动关闭

在这里插入图片描述
在这里插入图片描述

修改主机名

在这里插入图片描述

修改hosts文件

在这里插入图片描述

设置免密登录

执行ssh-keygen

在这里插入图片描述
在这里插入图片描述

执行操作ssh-copy-id root@hadoop01—在这输入密码

在这里插入图片描述

Hadoop安装

首先进入home目录下创建software文件夹

在这里插入图片描述

将jdk和hadoop压缩包上传到software目录下并解压2个安装包

在这里插入图片描述

将解压后的安装包，分别改名为hadoop和jdk8

在这里插入图片描述

配置jdk环境变量

/etc/profile

在这里插入图片描述

让环境变量立即生效

在这里插入图片描述

在Hadoop目录下创建目录tmp

在这里插入图片描述

修改配置文件

文件位置

在这里插入图片描述

修改配置文件Hadoop-env.sh

在这里插入图片描述

修改core-site.xml

在这里插入图片描述

修改hdfs-site.xml

在这里插入图片描述

修改 mapred-site.xml

cp mapred-site.xml.template mapred-site.xml
在这里插入图片描述

修改yarn-site.xml

在这里插入图片描述

修改slaves文件

在这里插入图片描述

配置Hadoop环境变量，使环境变量立即生效

在这里插入图片描述
在这里插入图片描述

格式化namenode

在这里插入图片描述
在这里插入图片描述

启动hadoop

执行命令sh start-dfs.sh

在这里插入图片描述

启动yarn

在这里插入图片描述

执行 jps查看

在这里插入图片描述

在浏览器启动hadoop01:50070查看

在这里插入图片描述

m0_67392409
关注
专栏目录
Hadoop安装与配置详细教程
王佳斌
04-27 16万+
【确保服务器集群安装和配置已经完成！】 前言 请根据读者的自身情况，进行相应随机应变。 我的三台CentOS7服务器： 主机：master（192.168.56.110） 从机：slave0（192.168.56.111） 从机：slave1（192.168.56.112） 每一个节点的安装与配置是相同的，在实际工作中，通常在master节点上完成安装和配置后，然后将安装目录复制到其他节点就可以，...
Windows环境下hadoop安装和配置详细步骤
AZengz的博客
11-11 2626
一、下载Hadoop http://www.apache.org/dyn/closer.cgi/hadoop/common （我下载的版本是hadoop-2.6.0-cdh5.14.2.tar.gz，这里就以此版本为例） 下载 hadoop 安装包至安装目录 安装目录：/opt/download/hadoop 2、解压安装包至软件目录（最好更名，以便之后方便配置文件） 3、进入文件，准备配置 因为需要用到 java 的路径，可以代码查找，并复制至剪贴板备用 二、配置Hadoop的环境变量 修改配置文件
Hadoop安装与配置
csdn2486的博客
09-23 1504
一、Hadoop安装与配置找到hadoop-2.6.0.tar.gz,将其复到master0节点的”/home/csu”目录内，解压hadoop解压成成功后自动在csu目录下创建hadoop-2.6.0子目录，可以用cd hadoop-2.6.0命令进入这个目录，并用ls -l 命令查看里面的文件。
Hadoop安装包
04-04
这个安装包是Linux系统下的Hadoop最新安装包，可以直接下载使用，希望能够对大家有帮助
Hadoop 2.6.0 安装包
最新发布
gitblog_09799的博客
10-17 302
Hadoop 2.6.0 安装包 【下载地址】Hadoop2.6.0安装包 本仓库提供Hadoop 2.6.0的安装包，适用于Hadoop集群的搭建和安装。该安装包包含了Hadoop 2.6.0的所有必要文件，方便用户快速部署和配置Hadoop环境 ...
Hadoop安装教程_单机_伪分布式配置_Hadoop2.6.0_Ubuntu14.04_给力星.html
03-02
网上找的，适合于原生Hadoop2，包括Hadoop 2.6.0, Hadoop 2.7.1 等版本，主要参考了官方安装教程，步骤详细，辅以适当说明，相信按照步骤来，都能顺利安装并运行Hadoop。
Hadoop课程实验和报告——Hadoop安装实验报告
06-30
Hadoop课程实验和报告——Hadoop安装实验报告 Hadoop是一个开源的大数据处理框架，由Apache基金会开发和维护。它提供了一种可靠、可扩展、可高效的方法来存储和处理大规模数据。在本实验报告中，我们将介绍Hadoop的...
Hadoop安装手册_Hadoop2.0-v1.71
08-04
第 4 章 安装部署 Hive 444.1 解压并安装 Hive 44
hadoop安装配置步骤
03-31
### Hadoop安装与配置详解 #### 一、前言 Hadoop是一款开源软件框架，用于分布式存储和处理大型数据集。它由Apache基金会维护，基于Google发表的关于Google File System (GFS) 和 MapReduce 论文实现。本文将详细...
Hadoop安装包.zip
11-18
Hadoop安装包.zip
hadoop安装包centos6.5-hadoop-2.6.4.tar.gz
03-28
hadoop安装包centos6.5-hadoop-2.6.4.tar.gzhadoop安装包centos6.5-hadoop-2.6.4.tar.gz
hadoop-3.1.2安装包
04-04
这个对应的是给技术文章《Hadoop3伪分布式安装》上面需要的下载资源 https://blog.csdn.net/qq_25615395/article/details/89018823
Hadoop_2.7.2安装包.rar
02-11
资源中是Hadoop2.7.2版本安装包，安装配置说明可参考我的博客，如果安装过程中遇到问题可与我联系解决。
hadoop-2.7.3安装包
03-30
hadoop-2.7.3安装包hadoop-2.7.3安装包hadoop-2.7.3安装包hadoop-2.7.3安装包hadoop-2.7.3安装包hadoop-2.7.3安装包hadoop-2.7.3安装包
Hadoop安装包和配置文件
weixin_43832542的博客
12-12 863
Hadoop目录结构 重要目录解释 1）bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本 2）etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件 3）lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能） 4）sbin目录：存放启动或停止Hadoop相关服务的脚本 5）share目录：存放Hadoop的依赖jar包、文档、和官方案例 配置文件 配置文件路径：$HADOOP_HOME/etc/hadoop 核心配置文件 core-site..
hadoop.zip hadoop2.7.1安装包
05-30
hadoop安装包 包括 win访问hadoop 文件系统所需api
Hadoop 0.20.2 版本安装包
12-12
伪分布式安装包，Hadoop 1.0指的是版本为Apache Hadoop 0.20.x、1.x或者CDH3系列的Hadoop，内核主要由HDFS和MapReduce两个系统组成，其中，MapReduce是一个离线处理框架，由编程模型（新旧API）、运行时环境和数据处理引擎
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值