linux设置Hadoop执行脚本到环境变量

最新推荐文章于 2025-01-31 16:45:37 发布
最新推荐文章于 2025-01-31 16:45:37 发布
阅读量3.6k 收藏 2
点赞数
分类专栏： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/songzhusheren/article/details/53207162
版权
本文介绍了如何设置Hadoop的临时及永久环境变量。通过在终端中执行特定命令或编辑/etc/profile文件并添加Hadoop bin目录到PATH中，使得可以从任何位置调用Hadoop命令。
摘要由CSDN通过智能技术生成

设置临时环境变量（只在单个终端 内起作用）

1、首先设置HADOOPHOME环境变量，执行命令：export  HADOOPHOME=/../hadoop/hadoop-2.5.2/bin （后面参数为Hadoop安装位置下的bin目录）---删除环境变量的命令为 unset HADOOPHOME

2、把HADOOPHOME添加到PATH变量中，执行命令：PATH=$PATH:$HADOOPHOME（当然可以省略第一步，直接把路径添加到PATH中也可以）至此可以在任何位置操作Hadoop的命令了

设置永久环境变量

通过修改 /etc/profile 文件来修改环境变量

修改位置如下：

# Path manipulation
if [ "$EUID" = "0" ]; then
    pathmunge /sbin
    pathmunge /usr/sbin
    pathmunge /usr/local/sbin
else
    pathmunge /usr/local/sbin after
    pathmunge /usr/sbin after
    pathmunge /sbin after
    pathmunge /home/hadoop/hadoop-2.5.2/bin
fi

其中 pathmunge /home/hadoop/hadoop-2.5.2/bin为要添加的，

然后执行命令：source /etc/profile 使其生效

执行命令：echo $PATH 查看就会多出/home/hadoop/hadoop-2.5.2/bin这个路径，就可以在任意地址下执行Hadoop的命令了

大数据 hadoop-3.1.3 linux 安装包
06-25
安装JDK后，设置环境变量`JAVA_HOME`指向JDK的安装路径。 接下来，下载Hadoop-3.1.3的压缩包，解压到一个合适的目录，例如 `/usr/local/hadoop`。然后，根据你的系统配置修改Hadoop的配置文件，主要涉及`core-site....
linux下的hadoop安装及配置详解
07-13
linux下的hadoop安装及配置详解
1-5.将Hadoop添加到环境变量，初始化HDFS,启动Hadoop，测试hdfs（Hadoop系列day01）
此号已弃用，搬家到：https://my.oschina.net/yust5273
09-21 2508
>>将Hadoop添加到环境变量1. [root@itcast01 Hadoop]# vim /etc/profile2. #打开这个文件之后，在文件末尾添加以下代码（上次配置的JDK也在下方写了出来） export JAVA_HOME=/uer/java/jdk1.7.0_60 export HADOOP_HOME=/itcast/hadoop-2.2.0 export PATH =$PATH
linux Hadoop环境变量安装及应用
emgexgb_sef的博客
04-05 4526
1．上传hadoop（切记在hadoop用户下） 1．解压缩 tar -xzfhadoop-2.7.5.tar.gz 1．配置环境变量 （1）首先进入hadoop的根目录 （2）配置HADOOP_HOME 查看 bashrc文件 （3）配置HADOOP_CONF_DIR （4）配置PATH vi ~/.bashrc （删除上面的PATH，重新写入一个新的） exportPATH=PATH:PATH:PATH:JAVA_HOME/bin:HADOOP_HOME/bin:HADOOP\_HOME/
Hadoop简介、安装与环境变量配置_hadoop环境变量
最新发布
2501_90404875的博客
01-31 2035
Hadoop作为大数据框架，更多的是作为集群面向服务器使用，所以本系列的内容以Linux服务器为主。为更好的学习使用Hadoop，在低成本的条件下，推荐可以通过docker、podman之类的容器手段启动容器开启集群的方式来更好的学习Hadoop（有条件的可以选择虚拟机或上云）。Hadoop是一个用Java语言开发的大数据框架，Hadoop的使用依赖于Jre，所以在正式安装配置Hadoop前，我们需要先安装配置好Java环境。
Hadoop环境配置(Linux虚拟机)
https://github.com/ZhaoyungZhang
02-28 5511
Hadoop环境配置(Linux虚拟机) 本学期选了大数据管理与分析这门课，主要使用Hadoop框架下进行数据分析与应用开发，在此先进行环境配置 注意 最好把JDK以及Hadoop 放在/usr/local下 添加环境变量的时候 可以加到/etc/profile 或者 按照该链接 w3cshcool的教材进行配置(强烈推荐) 环境要求 单机Hadoop的安装 安装JDK 链接 https://www.oracle.com/java/technologies/javase-java-arch
【开发环境】安装 Hadoop 运行环境 ( 下载 Hadoop | 解压 Hadoop | 设置 Hadoop 环境变量 | 配置 Hadoop 环境脚本 | 安装 winutils )
热门推荐
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
08-03 1万+
一、下载 Hadoop 二、解压 Hadoop 三、设置 Hadoop 环境变量 四、配置 Hadoop 环境脚本 五、安装 winutils 六、重启电脑 七、验证 Hadoop 安装效果
【Linux环境下安装配置JDK和HADOOP】
m0_64016142的博客
03-22 3799
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结 前言 工欲善其事，必先利其器，对于刚学数仓的人来说，安装配置hadoop是比较困难的，今天给大家来一期关于在Linux的环境下安装hadoop和jdk。 提示：以下是本篇文章正文内容，下面案例可供参考 一、什么是hadoop？ hadoop是由Apche基金会所开发的分布...
Linux修改hadoop配置文件及启动hadoop集群详细步骤
m0_74830349的博客
09-22 5584
pwd。
怎么使用linux环境变量,使用Linux的环境变量
weixin_34405769的博客
05-07 1378
许多程序和脚本都使用环境变量来获取系统信息，并存储临时数据和配置信息；1、什么是环境变量用来存储关于shell会话和工作环境的信息，就叫做环境变量；bash shell下两种类型：1、全局变量；2、局部变量；1.1、全局环境变量全局环境变量再shell会话，和在该shell中产生的子进程中都可见。Linux系统，默认情况下会支持一些全局环境变量，通过printenv来查看全局环境变量；使用echo...
Linux环境下配置Hadoop环境
weixin_40165317的博客
10-24 794
Linux：centOS 7 jdk：1.8 准备： 1. 关闭三台服务器的防火墙： systemctl stop firewalld.service 开机时禁止启动防火墙： systemctl disable firewalld.service 查看防火墙状态： firewall-cmd --state 一. 配置Hadoop环境 Java的环境配置不多赘述了，可以参考...
配置hadoop环境变量
2301_80318713的博客
03-28 1904
在master虚拟机中上传hadoop-3.1.4.tar.gz压缩包安装到目录/opt/software下。配置完Hadoop环境变量后生效环境变量的配置 source /etc/profile。验证Hadoop环境变量是否成功 hadoop version。hadoopl路径：进入Hadoop文件夹下。生效命令：scource /etc/profile。HADOOP_HOME=（Hadoop路径）验证：hadoop version。配置Hadoop环境变量。
hadoop的环境变量配置
Z17562766873的博客
12-02 902
在该窗口中点击[新建]，然后输出上图中最后两行内容，指出hadoop中的bin目录和sbin目录,其中%表示引用这个变量名下的变量值，分号表示多个变量环境之间的间隔，这里相当于引用了HADOOP_HOME中的值F:\hadoop-3.3.0，再跟后面的bin和sbin拼接在一起，结合起来就是路径F:\hadoop-3.3.0\sbin目录和F:\hadoop-3.3.0\bin目录。下载安装包之后，解压安装包，自己选择文件夹进行解压，不过要注意文件夹和目录的名称，解压完成之后进行本地环境变量的配置。
Win10配置Hadoop环境变量
weixin_44793495的博客
11-10 3384
Win10配置Hadoop环境变量 Eclipse、IDEA再windows10本地运行Hadoop的MapReduce程序。 解决痛点： 我们在学习hadoop的时候，平时为了运行MapReduce方便，就直接不想把MapReduce程序打成jar包再放到服务器或者虚拟机集群上运行。我们可以再win10电脑上面配置好简单的hadoop环境，写好MapReduce直接在本地简单的测试运行，提高我们的开发效率。 1、首先下载Hadoop Hadoop下载地址： ApacheHadoop全部版本链接(点我跳转
shell脚本一键配置hadoop
qq_38497133的博客
07-25 1185
文章目录一、环境配置** 脚本使用条件及脚本功能二、配置hadoop配置文件**脚本实现功能三、总结 一、环境配置 直接上脚本代码 #!/bin/bash # 修改主机名和主机列 echo "-------------开始修改主机名和主机列表--------------" a=`ifconfig ens33|awk -F " " 'NR==2{print $2}'` hostnamectl set-hostname znn b=`hostname` echo -e "$a \c" >> /etc
Linux的shell命令——变量用法
红目香薰
07-08 2654
Linux的shell命令——变量用法 变量的定义： 变量的命名规则： 变量的使用： 特殊变量： 环境变量： 删除变量： shell变量示例 在使用shell中的注意事项
Linux系统Hadoop伪分布式模式配置
stepondust 的课堂
02-07 5621
一、修改配置文件 需要配置相关文件，才能够让Hadoop在伪分布式模式下顺利运行，Hadoop的配置文件位于/usr/local/hadoop/etc/hadoop/中，进行伪分布式模式配置时，需要修改2个配置文件，即core-site.xml和hdfs-site.xml。 可以使用vim编辑器打开core-site.xml文件，它的初始内容如下： <configuration> &l...
配置Hadoop环境变量
2301_80318717的博客
03-28 813
1.停止NetworkManager服务 2.查看NetworkManager服务状态 3.移除NetworkManger服务 4.进入/opt/module目录 5.进入/etc/profile.d/my_env.sh,编辑Hadoop环境变量 6.进入hadoop-3.1.4，使用pwd查看路径 7.进入/etc/profile.d/my_env.sh，补全路径 8.生效环境变量的配置 9.验证环境是否安装成功 注意：如果配置文件输错，显示未找到命令，改正的方法： 10.返回/opt
Linux Shell编程：创建与执行脚本及环境变量详解
文档还着重讲解了shell中的环境变量，这些变量包括可写环境变量如HOMEMAILPATHPS1TERM，以及特殊环境变量如$*（所有命令行参数）、$#（参数总数）、$$（当前进程PID）和$?（上一条命令的退出状态）。位置参数($0至$9...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值