apache zeppelin 初次使用体验.

 

Zeppelin 是和Juppter 类似的笔记本工具，支持多种语言,支持spark,scala ,,,,

Zeppelin 界面:http://10.20.2.32:8181/#/notebook/2DP1QY3HA

 

Juppter:

 

 

Zepplin 安装方法:

 

1. 下载安装 (和spark 的某个节点安装在一起)

/var/server/zeppelin

 

2.修改配置文件:

zeppelin/conf/

[spark@spark-test-node2 conf]$ ls

configuration.xsl interpreter-list log4j_yarn_cluster.properties zeppelin-env.cmd.template zeppelin-env.sh.template zeppelin-site.xml.template

interpreter.json log4j.properties shiro.ini.template zeppelin-env.sh zeppelin-site.xml

 

在zeppelin-env.sh 里必须设置

export SPARK_HOME=/var/server/spark

 

zeepelin-site.xml 修改端口为8181, 避免跟spark 冲突.

<property>

<name>zeppelin.server.port</name>

<value>8181</value>

<description>Server port.</description>

</property>

 

3.启动 /var/server/zeppelin/bin/zeppelin-daemon start

 

4. 用浏览器打开http://10.20.2.32:8181/

 

5.进入浏览器配置: 点击右上角菜单的 Interpreter

5.1先输入spark 设置

 

 

spark://10.20.2.31:7077,10.20.2.32:7077,10.20.2.33:7077,10.20.2.34:7077,10.20.2.35:7077 如上图 点击编辑

对应的地方填写，然后下面的 save 保存。

 

5.2 然后设置hadoop hdfs

下面同样的方式,填写 file 过滤，然后填写hdfs 地址,然后保存.

 

 

6. 输入spark 代码测试。

验证成功。

 

这样以后再也不用输入在命令行里 使用spark-shell 了。

 

非常方便学习和研究，提高学习效率。