【Hadoop】环境配置

于 2020-03-01 12:45:55 发布
阅读量221 收藏
点赞数
分类专栏： Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Nicht_sehen/article/details/104590136
版权

CentOS 6.8
JDK 1.8
Hadoop 2.7.2
VM 15.5

克隆虚拟机

详见【Linux】虚拟机克隆及网络配置

前期准备

修改映射 vim /etc/hosts
在这里插入图片描述
修改hadoop用户权限
在这里插入图片描述
在这里插入图片描述
创建software,module文件夹
在这里插入图片描述
修改文件夹所属者
在这里插入图片描述
拷贝文件（使用xftp）
在这里插入图片描述

配置JDK

解压文件
在这里插入图片描述
在这里插入图片描述
配置环境变量
在这里插入图片描述
添加内容：
在这里插入图片描述
source一下
在这里插入图片描述
测试：
在这里插入图片描述
发现openjdk未卸载
查找相关文件并删除
在这里插入图片描述
重新source一下
在这里插入图片描述

配置Hadoop

解压文件：
在这里插入图片描述
配置环境变量
添加：
在这里插入图片描述
测试：
在这里插入图片描述
这个虚拟机作为配置分布式的原型机，其他机器克隆这个

Nicht_Sehen
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
IDEA中Hadoop的环境配置
hhhhhhhhhhhnb的博客
05-17 2399
没有配置HadoopHome： 在Windows下解压一份Hadoop安装包 Hadoop使用log4j进行日志输出，明显没有配置log4j 再次运行，显示了作业的运行情况 Hadoop环境变量配置（Windows下的可参照Linux配置，如下） 重启IDEA（或者重新启动电脑） 模拟器安装： winutils-master.zip 找到模拟器的两个文件 将这两个文件复制到如下目录中： C:\Windo...
Hadoop环境配置
12-21
hadoop环境配置
Hadoop——解决source not found
qq597757066的博客
05-09 1578
找到apache官网下载hadoop-2.6.0-src.tar.gz   找到这个源码包官网地址，下载对应版本   https://archive.apache.org/dist/hadoop/common/然后照网上说的解压这个源码包，再压缩成zip。再在 External location 里面找到你这个zip包，导进去，就看到了源码。网上有一种方法是用hadoop-2.6.0.zip 是安...
Hadoop常见错误总结
lanhuyuedui2012的专栏
07-08 195
注意：hadoop版本2.6.51、本地模式eclipse运行Maprduce项目报错Exceptionin thread "main"java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V原...
hadoop环境配置错误 Error：Invalid HADOOP_COMMON_HOME
热门推荐
u011952516的博客
12-09 1万+
hadoop环境配置错误：Error：Invalid HADOOP_COMMON_HOME 原因是：没有配置环境变量HADOOP_COMMON_HOME 解决方法：在～／.bash_profile里面配置环境变量HADOOP_COMMON_HOME HADOOP_COMMON_HOME=$HADOOP_HOME HADOOP_HOME是配置的Hadoop的安装目录 修改完之后执行：source ~...
hadoop环境配置
04-16
Hadoop 环境配置 Hadoop 是一种开源的大数据处理框架，由 Doug Cutting 和 Mike Cafarella 在 2005 年创建。Hadoop framework 使得开发者可以快速构建高效、可靠的大数据处理应用程序。为了让初学者更好地理解和...
windows下Hadoop环境配置文件
12-14
通过编写简单的Java程序并运行，验证Hadoop环境配置是否正确。尝试读取或写入HDFS上的文件，如果一切正常，你应该能在HDFS中看到这些操作的结果。 9. **关闭Hadoop服务**： 当你完成工作后，记得用`stop-dfs.sh`...
单节点运行hadoop环境配置.docx
09-18
在配置单节点Hadoop环境时，首先需要确保你的系统已经具备了Java环境，因为Hadoop是基于Java开发的分布式计算框架。这里选择了Java 1.6.32版本进行安装。你可以从Oracle官方网站下载对应的Linux i586版本的bin文件。...
单节点Hadoop环境配置
08-06
本文档为初次学习大数据的学生提供单节点配置的简单教程，同时简单介绍了Hadoop的分布式文件系统HDFS的一些简单命令。
计算机模拟考试.doc
07-18
计算机
《单片机原理与接口技术》--试卷A及参考答案.doc
07-18
单片机
艾意凯2023国际制药企业的中国市场机遇分析报告英文版.pdf
07-18
医疗行业研究报告
胰岛素行业深度报告国产替代开拓欧美市场国产胰岛素进入新阶段.pdf
07-18
胰岛素行业深度报告国产替代开拓欧美市场国产胰岛素进入新阶段
药物涂层球囊临床应用中国专家共识（第二版）.pdf
07-18
药物涂层球囊临床应用中国专家共识（第二版）
计算机审计稿.doc
07-18
计算机
细胞分选仪，全球前10强生产商排名及市场份额.docx
最新发布
07-18
细胞分选仪，全球前10强生产商排名及市场份额.docx
在Booking上使用H2O Sparkling Water和FeatureStore进行缩放机器学习 共30页.pdf
07-18
在Booking上使用H2O Sparkling Water和FeatureStore进行缩放机器学习 共30页.pdf
计算机教学学生创新能力的培养.doc
07-18
计算机
（精美）89C52单片机控制PWM调速电路实现小功率直流电机的转速.doc
07-18
单片机
（精美）单片机系统电路的PCB设计.doc
07-18
单片机

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值