![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
上海外来务工人员甲
这个作者很懒,什么都没留下…
展开
-
spark driver节点的搭建,在集群之外搭建一个节点用于提交spark程序到spark集群
在集群之外搭建一个节点用于提交spark程序到spark集群 说明:用于提交程序的节点ip: 192.168.1.188 spark集群Master节点ip:192.168.1.73(spark集群和hadoop集群是在一起的) 1.保证该节点和集群的master节点是互通的,在该节点安装和集群同样版本的spark和hadoop程序, 不需要启动,只用于提交作业时在driver端用于获取集群信...原创 2019-02-21 17:43:30 · 593 阅读 · 0 评论 -
如何kill掉spark standalone模式下的任务
找到需要删除的Application ID 如 : app-20190219171118-0060 在master节点机器上执行命令 curl -X POST “http://192.168.1.73:8080/app/kill/?id=app-20190219171118-0060&terminate=true” (换成自己的master节点,把id 改成自己的Application ...原创 2019-02-20 15:22:16 · 2152 阅读 · 0 评论