- 博客(2)
- 收藏
- 关注
RSS订阅原创 hadoop伪分布式+spark环境+scala环境
目录基础环境1.修改主机名2.网络映射java环境配置1.查看Linux是否安装了java jdk，如果查询有其他的java版本，则需要删除2.解压，压缩包与重命名3.修改java环境变量4.配置文件生效 source /etc/profile---也可以写成 . /etc/profilehadoop的环境配置1.解压hadoop2.修改配置文件vi /etc/profile3.配置文件生效，查看hadoop的版本hadoop集群伪分布式一、查看是否安装了ssh2.启动ssh服务3.本机生成公钥，私钥和验
2024-04-27 13:34:00
773
原创 你想月薪上万吗？你想左拥右抱吗？如果你想请开始学习--Hadoop
根据服务对象和层次分为：数据来源层、数据传输层、数据存储层、资源管理层、数据计算层、任务调度层、业务模型层。接下来对Hadoop生态圈中出现的相关组件做一个简要介绍。Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。
2024-03-08 21:01:42
894
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人