安装hadoop

最新推荐文章于 2024-05-05 17:49:19 发布
最新推荐文章于 2024-05-05 17:49:19 发布
阅读量1.1k 收藏 1
点赞数 2
分类专栏： hadoop 文章标签： docker unix 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45530192/article/details/121626640
版权

1 安装部署jdk
2 下载 hadoop 命令：
wget https://archive.apache.org/dist/hadoop/common/hadoop-2.6.1/hadoop-2.6.1.tar.gz

没有wget指令的话 apt install wget 或者 yum install wget 安装 wget工具

3 解压缩
tar zxvf hadoop-2.6.1.tar.gz
4 移动到一个文件夹 自定义
mv hadoop-2.6.1 /app/hadoop-2.6.1
5 创建一个hadoop用户组 和账号
然后给他关联
chown -R hadoop:hadoop /app/hadoop-2.6.1
6 配置文件
/home/hadoop/.bashrc文件配置 末尾加上
export HADOOP_HOME=/app/hadoop-2.6.1
export JAVA_HOME=/usr/lib/jvm/java
export PATH= P A T H : PATH: PATH:JAVA_HOME/bin: H A D O O P H O M E / b i n : HADOOP_HOME/bin: HADOOPH​OME/bin:HADOOP_HOME/sbin
7 保存退出 source激活
8 验证能否成功启动
su -l 自定义hadoop用户名 查看是否成功启动 看

大丈夫在世当日食一鲲
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
安装hadoop命令
07-26
安装hadoop教程有很多网上，在安装过程中遇到坑记录下和处理命令
hadoop保姆级安装教程
qq_52401562的博客
09-23 6392
hadoop保姆级安装教程 实现分布式集群安装，不再从入门到放弃！！ 这是一篇超详细的Hadoop安装教程，历时两个星期，重装了三次！基本把能踩的坑全踩了，还好没放弃???? 下面标了注意的地方基本就是我踩过的坑了 以下分为三个大点：准备，配置网络环境，安装hadoop 一、准备步骤：虚拟机安装 1.VMware下载 官网下载，安装VMware Workstation 10以上版本。 没有什么技术含量，基本就是疯狂点击下一步，更改安装路径。 2.下载centos6.7镜像 网上找对应的资源下载即可 注意：
安装Hadoop集群
wux_labs的博客
12-15 214
Spark3.3.1的安装软件包是基于Hadoop3.3+的，为了保持兼容性，这里选择使用Hadoop3.3版本。
大数据学习——安装Hadoop所需环境搭建
weixin_57127999的博客
05-06 1755
安装Hadoop所需环境搭建，练习测试仅限部分高校的学习系统使用，按照黄色点亮来做可以过关，蓝色不一定要执行。 编程要求 在右侧命令行中进行如下操作： 根据上述步骤完成安装Hadoop所需环境的搭建。 创建名为Hadoop的普通用户。 更新APT软件。 完成SSH的安装。 完成Java环境的安装。
hadoop 安装以及简单命令
大曹的博客
03-22 815
今天了解了一下hadoop的大体安装过程，由于资金紧张，在我的破笔记本上装了一下hadoop准备的三个东西：1，Vmware 自己下载，这个网上很多。2，centos 系统  3，Linuxjdk1.7以上   这三个都下载好以后。虚拟机安装centos 系统 这儿就不说了，随便装一装就行了，顺便安装tools工具1，登陆用户进入linux系统，然后在用户主目录创建一个文件夹，（任意地方），解压，...
hadoop安装所用命令记录
yandao的博客
03-29 2771
1.解压 解压到指定目录 tar -xzvf jdk-8u301-linux-x64.tar.gz -C ./../servers/ 指定文件解压 tar -zxvf /export/software/hadoop-2.7.4.tar.gz 2.建立软连接【快捷方式】 ln -s hadoop-2.7.4 hadoop ls ln -s jdk1.8.0_301/ jdk ls 3.Linux环境变量 在自定义安装软件的时候，经常需要配置环境变量，下面列举出各种对环境变量的配置方法。 3.1 输出环
linux下命令行安装hadoop2.7.2过程
Multiangle's Notepad
03-04 3649
1.创建hadoop用户组sudo addgroup hadoop2.创建hadoop用户sudo adduser -ingroup hadoop hadoop回车后会提示输入新的UNIX密码，这是新建用户hadoop的密码，输入回车即可。即密码不能为空。 最后确认信息是否正确，如果没问题，输入 Y3、为hadoop用户添加权限sudo gedit /etc/sudoers如果没有图形界面，可以
Hadoop安装环境2.x
Honour_Li的博客
04-14 304
【环境安装Centos 7】Hadoop2.x 0. Hadoop源码包下载 http://mirror.bit.edu.cn/apache/hadoop/common 1. 集群环境 Master 192.168.10.10 Slave1 192.168.10.11 Slave2 192.168.10.12 2. 下载安装包 #Master cd /usr/local/src/ wget htt...
进击大数据系列（二）：Hadoop 安装（HDFS+YARN+MapReduce）实战操作
民工哥的博客
06-10 1220
点击下方名片，设为星标！回复“1024”获取2TB学习资源！前面介绍了 Hadoop 基本概念与生态 相关的知识点，今天我将详细的为大家介绍 大数据 Hadoop 安装（HDFS+YARN+MapReduce）实战操作 相关知识，希望大家能够从中收获多多！如有帮助，请点在看、转发支持一波！！！安装 Hadoop（HDFS+YARN）环境准备这里准备三台VM虚拟机下载最新的Hadoop安装包下载地址...
安装Hadoop
weixin_52938172的博客
04-24 2844
今天记录一下，安装Centos系统，相当于虚拟化一个计算机系统，而一个计算机系统包括软件和硬件。 处理器数量一般是2，每个处理器的内核数量看母机window的内核数量。 打开任务管理器，点资源监视器，我的是8个内核。 这样设置一台虚拟机是2*1个内核，待会你开机的虚拟机总的内核数量<母机的内核数量8即可。 比如:待会你要同时开4台虚拟机,那么它的内核总数是4*2=8,没有超过8,就是可以的. ...
利用ansible 自动 安装Hadoop 集群
05-10
利用ansible 自动 安装Hadoop 集群
windows安装hadoop
01-07
Windows下配置Hadoop环境（全过程） 1、首先到官方下载官网的hadoop2.7.7,链接如下https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 2、下载对应版本都是hadooponwindows-master.zip  下载网址：...
RedHatlinux下安装hadoop
07-23
资源名称：RedHat linux下安装hadoop内容简介： hadoop安装有三种模式：单机模式，伪分布式，完全分布式。本文档主要讲述的是RedHat linux下安装hadoop 0.20.2, 并在windows下远程连接此hadoop,开发调试;感兴趣的...
实验1-安装Hadoop1
08-08
实验1-安装Hadoop请各位同学完成如下3个实验中的1个，并提交实验报告：单机模式的CentOS 6上安装伪分布式模式的CentOS 6上安装Hadoop分布
Windows下安装Hadoop（手把手包成功安装）
热门推荐
tttzzzqqq2018的博客
07-26 1万+
【实操】Windows下安装Hadoop（手把手包成功安装）
docker Harbor私有仓库部署管理
最新发布
mikechen1的博客
05-05 1146
Harbor是VWware 公司开源的企业级Docker Registry项目，其目标是帮助用户迅速搭建一个企业级的Docker Registry服务。Harbor以Docker 公司开源的Registry 为基础，提供了图形管理UI、基于角色的访问控制（Role Based AccessControl）、AD/LDAI们成以心宙计日志（Auditlogging）等企业用户需求的功能，同时还原生支持中文。Harbor的每个组件都是以Docker 容器的形式构建的，使用。
docker 安装镜像及使用命令
qiwunongqingyin的博客
05-05 874
docker pull 容器名:版本号run 运行-d后台运行容器名称环境变量-v 系统地址:docker地址。
Docker 虚拟机 WSL
jiang_changsheng的博客
05-02 950
这样，开发者可以在Windows系统上使用WSL和Docker的组合，获得更好的开发体验和环境一致性。WSL是在Windows系统内部提供Linux环境的一种技术，而VMware虚拟机是通过在物理计算机上创建一个完整的虚拟计算机来运行不同操作系统的技术。然而，需要注意的是，虚拟机也不是绝对安全的，仍然可能存在一些安全风险，如虚拟机逃逸攻击、虚拟机间的侧信道攻击等。虚拟机（如VMware）的安全性相对于Docker和WSL来说可以更高一些，因为虚拟机提供了更强的隔离性和独立性。
finalshell安装hadoop
01-09
根据提供的引用内容，finalshell是一个终端工具，用于远程连接和管理服务器。它本身并不用于安装Hadoop，但可以通过finalshell来执行Hadoop的安装命令。 要在finalshell中安装Hadoop，您需要按照以下步骤进行操作： 1. 首先，确保您已经在服务器上安装了Java Development Kit（JDK）。您可以使用以下命令检查JDK的安装情况： ```shell java -version ``` 如果未安装JDK，请根据您的操作系统下载并安装适当的JDK版本。 2. 下载Hadoop的压缩包（例如hadoop-3.3.0.tar.gz）并将其上传到服务器上的适当目录。 3. 在finalshell中打开一个终端连接到服务器。 4. 解压Hadoop压缩包。假设您将Hadoop压缩包上传到了`/opt`目录下，可以使用以下命令解压： ```shell tar -zxvf /opt/hadoop-3.3.0.tar.gz -C /opt ``` 5. 配置Hadoop环境变量。编辑`~/.bashrc`文件，并添加以下行： ```shell export HADOOP_HOME=/opt/hadoop-3.3.0 export PATH=$PATH:$HADOOP_HOME/bin ``` 6. 保存并关闭文件。然后，运行以下命令使环境变量生效： ```shell source ~/.bashrc ``` 7. 配置Hadoop的核心文件。进入Hadoop安装目录，并编辑`etc/hadoop/hadoop-env.sh`文件。找到以下行并设置正确的JDK路径： ```shell export JAVA_HOME=/path/to/jdk ``` 8. 配置Hadoop集群的其他文件，例如`etc/hadoop/core-site.xml`和`etc/hadoop/hdfs-site.xml`，根据您的需求进行相应的修改。 9. 启动Hadoop集群。使用以下命令启动Hadoop： ```shell start-dfs.sh start-yarn.sh ``` 现在，您已经成功地使用finalshell安装了Hadoop。您可以使用Hadoop命令行工具进行进一步的配置和管理。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值