jupyter与spark kernel结合的notebook安装及使用

最新推荐文章于 2023-06-17 22:10:44 发布

原创

最新推荐文章于 2023-06-17 22:10:44 发布 · 1.4w 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#spark #IPython #notebook #jupyter

本文介绍了如何在jupyter notebook中安装并使用除Python外的kernel，特别是Spark-kernel，以便于进行Scala和Spark的交互式编程。通过详细步骤，帮助读者实现高效的Spark开发环境配置。

安装环境

mac/ OS X 10.9.5, 64位/ sbt/ git

1、Install Jupyter and Python

使用Anaconda安装jupyter， Anaconda自带Python2.7和Python3.5

Anaconda下载地址

Anaconda官网提供各操作系统版本下载，包括Windows，Linux，OS X，32位及64位，选择适合自己版本的下载

#bash Anaconda3-2.5.0-MacOSX-x86_64.sh

不论是Linux还是OS X都请使用bash命令，使用. Anaconda3-2.5.0-Linux-x86_64.sh或者./Anaconda3-2.5.0-Linux-x86_64.sh 都不能安装成功，楼主亲测

Welcome to Anaconda3 2.5.0 (by Continuum Analytics Inc.)

In order to continue the installation process, please review the license
agreement.
Please, press ENTER to continue
>>>

一路回车

Do you approve the license terms?[yes|no]
>>>

当然是yes

Anaconda3 will now be installed into this location:
/User/zhangsan/anaconda3

  - Press ENTER to confirm the location
  - Press CTRL-C to abort the installation
  - Or specify a different location below
[/User/zhangsan/anaconda3]>>>