Hadoop环境搭配【MobaXterm中的（jdk、hodoop环境配置）】

最新推荐文章于 2022-05-26 16:22:09 发布
最新推荐文章于 2022-05-26 16:22:09 发布
阅读量1.1k 收藏 1
点赞数 1
文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xcfku/article/details/121874269
版权
本文介绍了如何在MobaXterm中配置Hadoop和JDK环境。首先，在/opt/software和/opt/module目录下创建文件夹，用于存放解压文件。接着，将JDK和Hadoop的压缩包解压到对应目录。然后，通过编辑/etc/profile文件设置环境变量，确保PATH包含JAVA_HOME和HADOOP_HOME。最后，通过java -version和hadoop version命令验证安装成功。
摘要由CSDN通过智能技术生成

①在opt文件下分别创建两个文件夹，命令：

mkdir /opt/software

mkdir /opt/module

我的是之前创建过所以无法重复

 注：software里面存放的是我们解压前的文件

        module里面存放的是问我们解压后的文件

②解压jdk到module文件夹中

（1）需要切换到software文件夹下

命令：cd /opt/software

（2）解压文件

命令：tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

3.解压hadoop到module的文件夹中

（1）需要切换到soft

最低0.47元/天 解锁文章
xcfku
关注
Hadoop环境配置（4）（MobaXterm）
Y1625Y的博客
12-10 2275
一.使虚拟机连接MobaXterm 打开虚拟机和MobaXterm 同样的步骤把其他两台虚拟机也连接MobaXterm 二.在MobaXterm中实现jdk ,hadoop的环境配置 在/opt文件下分别创建两个文件夹（software和module） 命令：mkdir/opt/software mkdir/opt/software mkdir/opt/module mkdir/opt/modu...
连接MobaXterm及jdk、hodoop环境配置
cyjku的博客
12-11 1816
一、连接MobaXterm 1.开启虚拟机hadoop100 2.打开MobaXterm 3.填写IP地址及用户名，如何点击ok 4.连接成功 二、jdk、hodoop环境配置 1.在opt文件下分别创建两个文件夹，命令： mkdir /opt/software mkdir /opt/module （在software里面存放的是我们解压前的文件，在module里面存放的是问我们解压后的文件） 2.解压jdk ①把需要解压的文件拉到software里 ②切换到sof..
Hadoop环境搭建（MobaXterm中）（3）
m0_56841551的博客
12-08 1216
一、jdk、hadoop环境配置 ①在opt文件夹下分别创建两个文件夹 ②解压jdk文件和hadoop文件到module文件夹中 解压jdk-8u212-linux-x64.tar.gz到/opt/module/中，命令 tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/ 解压hadoop-3.1.3.tar.gz到/opt/module/中，命令: tar -zxvf hadoop-3.1.3.tar.gz -C /opt/mo.
Hadoop单机模式用MobaXterm环境搭建(详细)
weixin_43631997的博客
10-09 3995
Hadoop单机模式环境搭建一、环境准备二、安装java1.安装java2.java环境配置三、安装Hadoop1.安装Hadoop2.Hadoop环境配置3.修改Hadoop配置文件4.名称节点格式化四、SSH免密登录五、启动Hadoop 一、环境准备 1.安装VMware虚拟机并且在虚拟机里安装linux系统 VMware安装虚拟机及CentOs安装 2.安装MobaXterm MobaXterm安装及使用 3.打开虚拟机和MobaXterm，并且连接成功 在自己的/home目录下新建一个文件夹h
linux下运行hadoop,安装并运行Hadoop - 如何在Linux上安装与配置Hadoop？_服务器应用_Linux公社-Linux系统门户网站...
weixin_36359075的博客
04-30 597
三、安装并运行Hadoop介绍Hadoop的安装之前，先介绍一下Hadoop对各个节点的角色定义。Hadoop分别从三个角度将主机划分为两种角色。第一，划分为master和slave，即主人与奴隶;第二，从HDFS的角度，将主机划分为NameNode和DataNode(在分布式文件系统中，目录的管理很重要，管理目录的就相当于主人，而NameNode就是目录管理者);第三，从MapReduce的角度...
ZooKeeper的配置选项的安装步骤
m0_59839948的博客
05-26 810
（一）下载和安装zooKeeper （1）在起始的/opt 目录下建立software文件和module文件，software文件用来下载安装包，下载后的安装包·可以·解压到module文件。可以用下面这一行代码： tar zxvf /opt/software/zookeeper-3.4.8.tar.gz -C /opt/module （2）解压安装包到 /opt/module目录下，修改 zookeeper-3.4.8.tar.gz 为 zookeeper，命令如下： mv zookeeper-3
MobaXterm的链接，jdk、Hadoop部署
m0_64918898的博客
12-13 604
Vm虚拟机--虚拟的模拟电脑Centos--电脑要安装的操作系统（linux系统）Moba--windows软件，windows和linux传输文件要用moba软件，Jdk--linux下面的jdkHadoop--hadoop软件，linux下的软件。 一，Moba链接 打开moba创建新的连接服务 二，jdk和Hadoop部署 我们需要在/opt下面创建两个文件夹software和module 1.software：放软件的压缩包 创建software文件夹的命令：mkdir...
Hadoop环境配置 -虚拟机连接Moba
xpk210411的博客
12-19 258
一、虚拟机连接MobaXterm 下载安装MobaXterm 1.打开虚拟机Hadoop100 2.打开MobaXterm 第一格填入虚拟机的IP地址 第二格填入虚拟机的用户名 此时连接成功 若连接超时则证明无法ping通虚拟机的IP地址，要去查看下虚拟机的IP和防火墙与电脑的防火墙 二、本地部署 1、在/opt 下创建两个文件夹：software、module 2、software：放软件的压缩包 module：放软件解压后的文件夹 3、切换到software...
Hadoop环境搭配（网络配置、连接MObaxterm）
xcfku的博客
12-09 1421
一、修改虚拟机网络配置 打开后点击更多设置 先择NTA模式，如图操作 点击上图的NAT设置 二、修改Windows网络设置 1.win+r打开运行面板，输入cmd进入终端 在终端板输入：ping 192.168.1.100 如果有丢失可能出现的情况有两种： 1.虚拟机IP出现错误 查看虚拟机当前命令： 1.ifconfig -a 2.ip addr 如果IP错误，修改ip，命令：vi /etc/sysconfig/network-scripts ...
配置mobaxterm里面的基本环境
sun1472580369的博客
12-12 1725
Vm虚拟机--虚拟的模拟电脑 Centos--电脑要安装的操作系统（linux系统） Moba--windows软件，windows和linux传输文件要用moba软件。 Jdk--linux下面的jdk Hadoop--hadoop软件，linux下的软件。 （二） 打开moba创建新的连接服务 出现以下页面 你之前ping192.168.1.100成功没有，没有这就打不开 如果你是ping192.168.1.128成功，那个这个new session就要连接192.168.1.128
执行了 mv / /opt/module 怎么办，把根目录 mv 到子目录怎么办
橘子味''的博客
02-20 634
如果你的 ssh 还没有断开的话执行下面的命令就能恢复 /opt/module/lib/ld-linux.so.2 --library-path /opt/module/lib /opt/module/bin/mv * / 注意 /opt/module 里面包含的是从根目录 mv 过来的文件 /opt/module/lib/ld-linux.so.2 --library-path /opt/module/lib是用来指明链接库 /opt/module/bin/mv * / 这个是执行移动命令，移动回去
/opt/module/jdk1.8.0_144
sing02的博客
10-15 1963
文章目录 1.虚拟机环境准备 1.1 克隆虚拟机（一共三台） 1.2修改克隆虚拟机的静态IP 1.3修改主机名 1.4 关闭防火墙 1.5创建sparky用户 1.6 配置sparky用户具有root权限 2.安装JDK 3.安装Hadoop Hadoop目录结构 1.虚拟机环境准备 克隆虚拟机（一共三台） 修改克隆虚拟机的静态 在终端命令窗口输入 进入如下页面，删除eth0该行；将eth1修改为eth0，同时...
一看就会的Linux环境 安装配置 MySQL 连接MobaXterm（图文）
weixin_44147632的博客
07-12 4594
目录Linux虚拟机网关配置Moba连接虚拟机安装JDK安装MySQL 在安装完Oracle VM VitualBox之后，我们需要创建linux虚拟机，并且对其进行配置，并实现与MySQL数据库的连接。 本操作所需文件在以下连接中： 链接: https://pan.baidu.com/s/1q7I_CTdMpUiJj33ZJe5lmw 提取码：vo5j Linux虚拟机 操作所需文件如下： 一、打开VirtualBox： 新建虚拟电脑：选择专家模式，设置名称，类型为Linux，版本为Red Hat（64
linux 安装jdk步骤及问题解决
baidu_41614347的博客
10-10 1283
1、下载jdk jdk8管网下载地址： https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 需要Oracle账号可以注册一个立即使用 Java Archive Downloads - Java SE 8 也可以从这里下载 我下载是的jdk-8u202-linux-x64.tar.gz 2、将jar包上传至linux服务器并解压 创建java文件夹：mkdir ...
Linux下安装JDK
xu_fight的博客
03-24 3025
Linux下安装JDK 本文主要介绍Linux环境如何通过解压JDK安装包的方式安装JDK，搭建Java环境。 一、安装环境 Linux系统：CentOS 7； JDK版本：1.8； 连接工具：Xshell、Xftp 二、安装步骤 第一步 检测系统是否默认安装OpenJDK 系统默认安装OpenJDK，首先需要删除OpenJDK 1、查看以前是不是安装了openjdk 如果不是root用户需要切换到root用户（su - root） 命令： rpm -qa | grep java 有则卸载，没有就不用 2.
Hadoop 环境搭建，创建moba、环境配置
m0_64965997的博客
12-23 223
虚拟机连接Moba 一、先打开虚拟机Hadoop100 二、打开MobaXterm 1、New session 创建新的moba 2、红框内打自己虚拟机的IP地址 黄框内是自己的管理员用户 root 创建完成之后侧面就会出现自己所创建的IP 3、 要在联网的情况下在开启 不然就会连接失败 4、 连接成功就是下面的形式 jdk、hadoop环境配置 一、在opt文件夹下分别创建两个文件夹(software和module) 命令：mk...
Hadoop集群进行map词频统计
weixin_47231713的博客
12-26 2766
一、首先新建虚拟机 二、配置静态IP 1、首先查看虚拟网络编辑器 查看起始IP 2.1、修改静态IP 输入指令：vi /etc/sysconfig/network-scripts/ifcfg-ens33 修改BOOTPROTO=static 增加IPADDR、NETWASK、GATEWAY、DNS1 ...
解决错误：/opt/module/hadoop-2.7.2/sbin/yarn-daemon.sh:行125: /tmp/yarn-hadoop-resourcemanager.pid: 权限不够
qq_43437122的博客
06-01 5910
今天启动集群的YARN时，报了一个这样的错误。 它最先报的是这样一个错误： log4j:ERROR setFile(null,true) call failed. java.io.FileNotFoundException: (权限不够) 然后我重新format了以下就转为了下面这个错误： /opt/module/hadoop-2.7.2/sbin/yarn-daemon.sh:行125: /tmp/yarn-hadoop-resourcemanager.pid: 权限不够 下面是我的尝试的各种方法： 1.
大数据hadoop3.1.3——Hadoop HA高可用学习笔记（安装与配置）
caron的博客
05-07 2013
一、HA概述 1）所谓HA（High Availablity），即高可用（7*24小时不中断服务）。 2）实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS的HA和YARN的HA。 3）Hadoop2.0之前，在HDFS集群中NameNode存在单点故障SPOF（Single Points Of Failure）。 4）NameNode主要在以下两个方面影响HD...
无法访问/opt/module/spark/jars/spa
JavaBigData的博客
05-26 284
[baiyun@hd102 bin]$ hive ls: 无法访问/opt/module/spark/jars/spark-*.jar: 没有那个文件或目录 解决hive启动报错提示 修改/opt/module/hive/bin/hive if [[ -n “$SPARK_HOME” ]] then sparkAssemblyPath=ls ${SPARK_HOME}/lib/spark-assembly-*.jar CLASSPATH="CLASSPATH:{CLASSPATH}:CLASSPATH:{s
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值