- 博客(3)
- 收藏
- 关注
原创 hadoop3.2.3伪分布式搭建与spark2.12.17配置
ssh-copy-id -i /root/.ssh/id_rsa.pub 5yyg //5yyg是我的主机名。hadoop3.2.3伪分布式搭建与spark2.12.17配置。4、配置 mapred-site.xml。1、配置 hadoop-env.sh。2、配置core-site.xml。3、配置hdfs-site.xml。5、配置yarn-site.xml。hadoop3.2.3安装与配置。1、配置hadoop环境变量。配置spark-env.sh。配置spark环境变量。
2023-05-23 20:34:50
358
原创 基于hadoop2.6.4的spark1.6.2的伪分布式
进入配置文件目录 cd /home/hadoop/soft-install/bigdata/spark-1.6.2-bin-hadoop2.6/conf。2、配置 spark-env.sh mv spark-env.sh.template spark-env.sh。1、解压scala2.1.0,scala2.1.0与spark21.6.2匹配。1、配置slaves mv slaves.template slaves。4、jps查看进程 出现master和work即成功。2、解压spark压缩包。
2023-05-20 00:33:04
150
原创 hadoop2.6.4伪分布式搭建
1、配置hadoop环境变量。解压jdk到我需要的目录。4、配置 mapred-site.xml。测试jdk是否配置成功。2、hadoop2.6.4安装与配置。1、配置 hadoop-env.sh。2、配置core-site.xml。3、配置hdfs-site.xml。5、配置yarn-site.xml。1、jdk的安装与配置。//临时文件存放地点。
2023-05-19 20:56:57
465
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人