- 博客(2)
- 收藏
- 关注
RSS订阅原创 spark配置——local模式-yarn模式-spark集群
准备 三台配置hadoop集群的虚拟机 下载spark，scala，anaconda spark下载地址 scala下载地址 Anaconda下载地址 将下载的软件上传到虚拟机上 local模式 解压spark和scala，并重命名到program文件夹下 tar -zxvf scala-2.12.15.tgz tar -zxvf spark-3.0.3-bin-hadoop3.2.tgz mv scala-2.12.15 /home/hadoop/program/scala-2.12 mv spa
2021-10-14 15:04:18
875
原创 hadoop集群配置——本地模式-伪分布式-全分布式
hadoop集群搭建 local模式 首先准备三台虚拟机（centos7版） 配置网络和主机之间的映射关系，保证三台虚拟机之间能相互找到（需要root用户，三台虚拟机均需要配置）： vi /etc/hosts 在后面添加网络和主机的映射： 192.168.187.100 hadoop0 192.168.187.101 hadoop1 192.168.187.102 hadoop2 检验： ping hadoop0 ping hadoop1 ping hadoop2 关闭防火墙（需要ro
2021-10-11 17:21:38
303
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人