Hadoop集群
文章平均质量分 72
Hadoop集群搭建
VWware WorkStation安装、虚拟机软件安装;
客户机操作系统CentOS的配置;
JDK安装及配置、Hadoop本地模式部署及测试;
xsync集群分发脚本;
完全分布式 Hadoop 安装部署及测试;
集群崩溃处理及启动时常见报错解决办法。
布丁椰奶冻
代码随手记!希望不要偷懒!
展开
-
【Hadoop集群搭建】VWware WorkStation安装、虚拟机软件安装
掌握虚拟机软件VWware WorkStation安装方法,掌握在虚拟机软件中安装OS操作系统的方法,为Hadoop集群安装准备。原创 2024-06-18 17:06:41 · 169 阅读 · 0 评论 -
【Hadoop集群搭建】客户机操作系统CentOS的配置
实验2: 客户机操作系统CentOS的配置熟悉并掌握Linux常用的命令、工具的使用熟悉并掌握集群中单个客户机操作系统配置,并掌握克隆虚拟机方法。原创 2024-06-18 17:37:56 · 343 阅读 · 0 评论 -
【Hadoop集群搭建】xsync集群分发脚本
1. 查看环境变量2. 在用户的/bin 目录下创建 xsync 文件3. 在该文件中编写如下代码4.修改脚本 xsync 具有执行权限5. 测试脚本,将脚本复制到/bin中,以便全局调用6.同步环境变量配置最后可以看到环境变量配置成功。原创 2024-06-19 14:55:43 · 258 阅读 · 0 评论 -
【Hadoop集群搭建】JDK安装及配置、Hadoop本地模式部署及测试
1. 熟悉 SSH 工具的使用方法2. 掌握 JDK 安装及配置3. 掌握 Hadoop 本地模式部署及测试原创 2024-06-18 21:45:12 · 1268 阅读 · 0 评论 -
【Hadoop集群搭建】完全分布式 Hadoop 安装部署及测试
1. 掌握 SSH 免密钥通信配置方法2. 掌握 Hadoop 集群配置部署方法集群安装配置完整过程a) 3 台客户机(关闭防火墙、设置好IP、主机名、时钟同步等信息在之前发布的博客有)b) 分别安装 JDK 并配置环境变量c) 安装 Hadoop 并配置环境变量d) 配置 SSH 免密钥通信e) 配置集群f) 群起集群并测试原创 2024-06-19 15:08:29 · 1620 阅读 · 0 评论 -
【Hadoop集群搭建】集群崩溃处理及启动时常见报错解决办法
1. 集群崩溃处理1.1 杀死进程1.2删除目录(logs/和hadoopdata/)1.3重新初始化集群1.4重新启动集群2. 启动时常见报错在运行程序测试 MapReduce 计算框架时报错如下原创 2024-06-20 15:25:47 · 701 阅读 · 0 评论