- 博客(3)
- 资源 (2)
- 收藏
- 关注
原创 hadoop完全分布式搭建
1、编辑hadoop-env.sh vi /hadoop/hadoop-2.6.0/etc/hadoop/hadoop-env.sh 2、修改JAVA_HOME路径 export JAVA_HOME=/hadoop/jdk1.8.0_221 1、编辑yarn-env.sh vi /hadoop/hadoop-2.6.0/etc/hadoop/yarn-env.sh 2、修改JAVA_HOME路径 export JAVA_HOME=/hadoop/jdk1.8.0_221 1、创建目录,用于存放数据落地到
2021-10-22 21:58:30 66
原创 山东省技能兴鲁大数据赛项
一、大数据平台组件搭建。 要求在Hadoop集群上搭建1.6.3版本的Spark分布式集群。(提示如下,注意每一步骤的代码与结果需截图在报告中体现) 1.Spark安装包处理,解压到/usr/local目录下,在master节点通过命令“wget -P /opt http://datasrc.tipdm.net:81/bigdata/spark/software/spark-1.6.3-bin-hadoop2.6.tgz”进行获取。 2.Spark配置文件修改(spark-env.sh、slaves、spa
2021-10-22 21:46:15 213
原创 idea配置maven
下载maven 版本:3.6.0 链接: https://pan.baidu.com/s/1PvYk7uFBqkjdnaDiPyD24A 提取码: rta7 配置maven 1、解压文件 2、创建maven仓库文件夹 3、设置maven setting文件 4、打开setting: (1)配置maven仓库的位置 (2)下载镜像服务器地址 alimaven aliyun maven ht...
2020-02-24 22:37:24 174
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人