利用 livy 远程提交 spark作业
1. 下载,安装 livy
下载 地址 :http://livy.io/quickstart.html
下载之后,解压即可运行
2. 配置环境变量
export SPARK_HOME=/usr/lib/spark
export HADOOP_CONF_DIR=/etc/hadoop/conf
3.配置主机和端口(可跳过,直接用默认值)
# What host address to start the server on. By default, Livy will bind to all network interfaces. (主机)
livy.server.host = 0.0.0.0