关闭

单机搭建spark环境

110人阅读 评论(0) 收藏 举报
分类:

spark的环境搭建比较容易,但是为了巩固记忆,我还是把她写下来;

首先,要下载资源,Apache官网可以下载;

%我是在我的Mac上装的,据说windows装起来很费劲%


2,将spark文件包,放到自己的指定工作目录;

3,将终端change到工作目录,

键入 command:./sbin/start-master.sh

4,浏览器 输入:localhost:8080

5,创建工作节点,命令为:

./bin/spark-class org.apache.spark.deploy.worker.Worker  spark://......

spark 后加的内容为localhost界面的URL;注意REST URL不等于URL


以上工作节点创建完成,刷新localhost界面可以发现 WorkerID;


_________________________________________________________________________________________________________________________

0
0

查看评论
* 以上用户言论只代表其个人观点,不代表CSDN网站的观点或立场
    个人资料
    • 访问:2226次
    • 积分:187
    • 等级:
    • 排名:千里之外
    • 原创:17篇
    • 转载:0篇
    • 译文:0篇
    • 评论:0条
    文章分类