hadoop - 环境搭建（安装JDK+安装hadoop+配置本地模式）

最新推荐文章于 2024-09-22 20:08:28 发布
置顶 最新推荐文章于 2024-09-22 20:08:28 发布
阅读量2.9k 收藏 11
点赞数 1
分类专栏： 大数据 搭建环境 Linux 文章标签： 大数据 Hadoop JDK Linux Java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/w7239/article/details/89949155
版权
本文详细介绍了如何在Linux环境下安装JDK和Hadoop，包括下载安装JDK，创建符号链接，配置环境变量，以及验证安装成功的步骤。在完成JDK的安装后，进一步指导如何安装Hadoop，同样涉及环境变量配置和验证。最终，系统处于本地模式，为后续的完全分布式模式配置奠定了基础。
摘要由CSDN通过智能技术生成

1. 安装JDK

a) 下载jdk-8u65-linux-x64.tar.gz
b)上传并tar开
$ cd ~
$ mkdir downloads
c)利用FileZilla把jdk-8u65-linux-x64.tar.gz上传到~/downloads/目录下
$ cd ~/downloads/
$ cd ls

$ tar -zxvf jdk-8u65-linux-x64.tar.gz

d)创建/soft文件夹
$ sudo mkdir /soft

$ sudo chown yylin:yylin /soft

e)移动tar开的文件到/soft下
$ mv ~/downloads/jdk1.8.0_65 /soft/

最低0.47元/天 解锁文章
attention！
关注
专栏目录
Hadoop-2.6.2-cdh5.16.2安装部署+Hadoop包以及jdk包下载
whs0329的博客
11-24 4183
1.hadoop下载 我下载的是hadoop-2.6.0.-cdh5.16.2.tar.gz 如果有想换其他版本的可以去官网下载：https://hadoop.apache.org 下面是官网打开初始界面 往下拉到底部，选择Release archive,点击进去 进去以后各种版本任你挑选，选中你想要下载的版本，点击Release 最后再点击Download,下载tar包 下载完Hadoop再进行jdk下载（jdk版本参考Hadoop推荐的版本，不然有可能你的j....
Hadoop-安装JDK
weixin_52560904的博客
12-14 3370
之前我们按照了VM虚拟机、Moba。解释一下都有什么作用： 1.Vm虚拟机---想要在windows电脑上操作linux操作系统需要安装这个软件 2.CentOS---是linux操作系统 3.配置ip、主机名、映射、虚拟机的网络适配器、windows的网络适配器 4.本机windows就可以和linux传输 5.Moba软件就是为了让linux和windows连接 6.Hadoop、jdk都是linux的软件 今儿我们来按照一个比较比较重要的--JDK 首先我们先打开VM然后再打卡Moba
Hadoop安装
最新发布
cingdy0124的博客
09-22 1507
Hadoop的安装方式有三种，分别是单机模式，伪分布式模式，分布式模式。
hadoop环境搭建之安装JDK
journey in java
11-25 8502
判断是否安装了jdk 使用java -version 和 javac命令判断是否安装了jdk [root@localhost .ssh]# java -version -bash: java: command not found [root@localhost .ssh]# javac -bash: javac: command not found [root@localhost .ssh]#
hadoop搭建之jdk安装
To-nemy
10-22 634
-----   安装jdk；          目前的集群中包括4个节点：一个主节点，3个从节点，节点之间局域王连杰，可以互相通信，节点的ip地址分布如下： 节点ip分布 节点   机器分布  ip地址 主节点 master.hadoop 172.21.3.73 从节点 Slave1.Hadoop Slave
Hadoop集群JDK安装
m0_46238032的博客
04-08 1853
一、实验的目的和要求： 掌握在完全分布模式的整合平台中快捷的进行JDK的安装和验证； 在集群中所有主机上完成JDK安装； 所有主机上JDK相关命令能够正常使用。 二、实验的环境： 1、五台独立的虚拟机； 2、主机之间有效的网络连接； 3、所有主机已完成网络属性配置； 三、实验步骤： 1、卸载原有JDK； 注：所有操作需要使用root用户进行，并且在集群中每台主机操作一次。 #rpm –qa | grep java #rpm –qa | grp jdk #rpm
Hadoop之jdk的安装
weixin_45256098的博客
06-04 1368
【实验目的】 1.安装配置JDK 1.五台独立PC机或虚拟机主机之间有有效的网络连接 2.每台主机内存2G以上，磁盘剩余空间500M以上所有主机上已安装CentOS 7.4操作系统 3.所有主机已完成网络属性配置 1.卸载原有JDK 该项的所有操作步骤需要使用root用户进行。并且在集群中每台主机操作一次，发现没有，不必卸载 因为我的查看没有jdk，所以不需要卸载原有的，只需直接安装即可。 2. 安装 此项的所有操作步骤使用专门用于集群的用户admin进行，此项只在一台主机操作 首先，我们先新建一个存放H
hadoop-3.1.3.tar jdk-8u212-linux-x64.tar 以及hadoop3.1.3配置文件(已修改好)
07-22
总之，这些文件提供了在Linux环境下搭建和运行Hadoop集群所需的所有基础，包括Hadoop软件、JDK和预配置的Hadoop配置文件。用户需要对Hadoop和Linux有基本了解，才能正确地安装和配置这些组件，以实现高效的大数据...
win10下搭建Hadoop环境（jdk+mysql+hadoop+scala+hive+spark） 3.docx
09-17
在Windows 10环境下搭建Hadoop生态系统，包括JDK、MySQL、Hadoop、Scala、Hive和Spark等组件，是一项繁琐但重要的任务，这将为你提供一个基础的大数据处理平台。下面将详细介绍每个组件的安装与配置过程。 **1. JDK...
hadoop插件apache-hadoop-3.1.0-winutils-master.zip
12-17
2. **Java环境**：Hadoop依赖Java运行，因此确保系统已经安装了兼容的JDK，并且JAVA_HOME环境变量已正确设置。 3. **HDFS初始化**：使用`winutils.exe`初始化HDFS文件系统，创建NameNode和DataNode的数据目录，这...
hadoop集群搭建——JDK的安装
01-21
在VMware上部署hadoop集群，首先需要安装jdk。 掌握在完全分布的整合平台中快捷的进行JDK的安装 (1)完全分布模式中JDK的安装和验证； (2)在集群中所有主机上完成JDK的安装； 所有主机上JDK相关命令能够正常使用
配置hadoop和jdk(java)环境
FA_learning的博客
11-21 1449
简单说下吧，希望大家能理解
hadoop学习——安装JDK
LiQingBB的博客
04-05 323
解压缩 将压缩包解压，建议将所有的软件存在一个目录下。 因为我是用root用户直接操作的，所以直接创建一个app文件夹，然后将JDK解压到该文件夹中。 cd /root mkdir app tar -zxvf jdk的路径 -C /root/app(需要安装的路径) 配置JDK 此时JDK的路径为： /root/app/jdk1.8.0_91 将JDK的路径保存到系统的环境变量...
Hadoop安装—安装JDK
tianxieeryang的博客
04-02 683
javac提示没有安装，按照提示信息；apt-get install open-7-jdk按照提示安装完成后；javac测试；vim /etc/profile配置环境变量export JAVA_HOME=/jdk路径export JRE_HOME=$JAVA_HOME/jreexport CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexport...
hadoop安装/JDK安装
码农的世界你们不懂
09-29 763
1. 准备三台机器 修改host的namevim /etc/hosts 192.168.119.144 hadoop1 192.168.119.145 hadoop2 192.168.119.146 hadoop3 2.安装jdk解压jdk到指定的文件夹 重命名文件夹 mv 原文件夹的名字 新文件夹的名字 配置文件 vim /etc/profileJAVA_HOME=/usr/l
Hadoop之环境配置
m0_51984816的博客
03-02 4246
面对学校课程要求学生搭建自己的伪分布式模式，所面临的各种坑，亲自踩坑。 1. 安装环境ubuntu 2.安装jdk 3.安装Hadoop 1.在安装ubuntu时需要注意安装ubuntu创建用户，等待时间比较长，大家需要有点耐心。 2.安装jdk时需要注意jdk的版本号，最好去官网下载18的版本带有linux的标识，配置环境时：注意：export后加上的是你电脑上jdk的实际路径，不要完全按照你的教课书，因为不完全与你的电脑一致，不要照抄啊！！！ 这样的话java -version的版本号就会显示成功。 3
Hadoop环境搭建之JDK的安装
Hello_Word___的博客
10-16 2610
环境： jdk 1.8.0 centos 6.5 一.使用mkdir创建一个名为opt 的目录(目录名随意)，将jdk-8u60-linux-x64.tar.gz通过SecureCRT传到目标主机中，使用tar -zxvf解压到当前目录。 二，进入jdk1.8.0_60目录，使用pwd命令获取当前目录路径，记录下来。（/opt/jdk1.8.0_60） 三.使用v
Hadoop-本地模式搭建
伍婷的专栏
02-22 273
小编先跳过Hadoop的体系结构这段,后续会补上,先将环境搭建写出来,便于大家能够先对Hadoop有个初步认识做准备,今天主要是写本地模式搭建.本地模式不涉及HD...
Hadoop本地模式搭建
hangoer的博客
08-28 408
本地模式介绍 - 特点: 本地模式，即运⾏在单台机器上，没有分布式思想，使⽤的是本地⽂件系统。 - ⽤途: 本地模式主要⽤于对MapReduce程序的逻辑进⾏调试，确保程序的正确。由于在本 地模式下测试和调试MapReduce程序较为⽅便，因此，这种模式适宜⽤在开发阶段。 **1.2. 搭建过程** 平台软件说明 环境搭建: JDK的安装 检查是否已经安装过或是否有内置的JDK，如果有，将其卸载 # 卸载之前的原因，主要是需要保证安装的JDK版本的正确性。 [root@qianfeng01 ~
使用i-stack搭建1+3集群：Hadoop环境配置与JDK安装
在所有节点上安装完JDK后，我们需要下载Hadoop二进制包，将其解压，并配置相关环境变量，如`JAVA_HOME`，`HADOOP_HOME`等。配置完成后，我们需要在所有节点上格式化NameNode，并启动DataNodes和TaskTrackers。在主...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值