这篇博客是Java后端应届毕业生初学Hadoop的心得，详细介绍了从环境准备、JDK安装、Hadoop安装、启动到测试单机Hadoop的全过程。博主分享了配置Linux虚拟机集群、关闭防火墙、SSH免密登录、配置Hadoop环境变量和启动脚本等关键步骤，并提供了相关资源链接。最后，博主期待大数据领域的大佬给予初学者建议。
新人初识Hadoop，从0搭建+完成官方单机demo，暂时只完成到这里，待我继续学习ing，继续更新。。。
1 环境准备
（1）准备一个VM安装3个虚拟机or准备3个云服务器（集群准备）（一个内存2GB就够，如果是云服务器请保证不要启动别的进程，我学生机运行个tomcat，nginx再跑hadoop就跑不动）
（2）关闭防火墙
（3）配置网络映射例如（
192.168.xxx.1 hadoop001
192.168.xxx.2 hadoop002
192.168.xxx.3 hadoop003 ）
(4)配置三台虚拟机之间的ssh免密登录。
(5)下载linux版本的jdk和hadoop（链接：https://pan.baidu.com/s/1CdBWty8QhUdQ7K6J0KUQuA
提取码：0ypl 复制这段内容后打开百度网盘手机App，操作更方便哦）（如果侵权请联系本人）
2 Jdk环境安装
（1）上传jdk安装包
（2）解压安装包
（3）配置环境变量 /etc/profile （详情步骤网上搜一下很多）
3 Hadoop环境安装
（1）上传HADOOP安装包
（2）解压安装包
（3）修改配置文件 hadoop-3.1.
最低0.47元/天 解锁文章
扫一扫
16万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
