Spark Client部署

1,参考文章(【Spark】Spark的Standalone模式安装部署)进行Spark Client部署时,要注意一点:

如果你在spark-env.sh里设置了JAVA_HOME的话,需要在把spark文件夹拷贝到本地后,修改一下JAVA_HOME,改成你本机的相对应的JAVA_HOME。

2,在client电脑上以“cluster”模式提交任务时,注意要把提交的Jar包放到一个所有Master和Slave都能访问到的地方,例如:hadoop上(hdfs://hadoop-ip:9000/test/spark/wordcount/jar/spark_word_count.jar)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值