这些到底怎么使用,目前我还很懵,暂时先把遇到的问题记录下。
我的系统为ubuntu16.04
1,安装anaconda和jupyter,在https://www.anaconda.com/distribution/下载,下载后直接执行sh Anaconda3-xxxx.sh
安装完成后,用户会进入base环境(用户命令行中会自动增加(base) xx@xx),在该环境中可以启动jupyter,jupyter notebook。
退出base环境可以试用conda deactivate命令。
~/.bashrc中会增加一些代码,如下图,如果不想默认使用该环境,可以把这些代码移出到另一个文件,想启动jupyter的时候,source 该文件。
2,使用pip install jupyter只适用于mac,linux似乎不行。
3,jupyter上执行from pyspark import SparkContext, SparkConf,报错No module named 'pyspar