- 博客(2)
- 收藏
- 关注
原创 Spark 的安装(高中生版)
本文介绍了在Linux服务器上安装配置Spark和JDK的完整流程:1)创建/opt/software和/opt/module目录用于存放软件;2)上传并解压JDK和Spark安装包;3)配置系统环境变量;4)解决Spark依赖Hadoop类路径问题;5)验证安装结果。通过编辑spark-env.sh添加Hadoop类路径配置,最终成功启动spark-shell并运行测试代码。该文档详细记录了从环境准备到最终验证的完整部署过程。
2025-12-22 15:23:12
240
原创 Hadoop搭建(高中生版)
摘要:本文详细介绍了Hadoop完全分布式集群的搭建过程,包括虚拟机配置、网络设置、SSH免密登录、Hadoop安装配置及集群启动等步骤。主要内容涉及创建虚拟机、静态IP配置、主机名修改、防火墙关闭、环境变量设置、Hadoop核心配置文件修改,以及集群的初始化和启动验证。通过分步指导,帮助用户完成从单节点到多节点的Hadoop集群部署,最终实现HDFS和YARN服务的正常运行。
2025-12-18 19:42:18
1086
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅