pandas-sklearn-spark环境搭建

因为linux下搭建环境没有windows下那么麻烦，这里采用的是Linux下搭建开发环境。

pandas和sklearn

这里推荐使用集成包搭建

Anaconda

Anaconda是一个用于科学计算的Python发行版，支持 Linux, Mac, Windows系统，提供了包管理与环境管理的功能，可以很方便地解决多版本python并存、切换以及各种第三方包安装问题。

安装步骤

• 下载安装包
  官网下载链接 https://www.continuum.io/downloads ，点进去可以看到有python3和python2的，因为python2和python3差别较大，推荐两个都下载安装一下

• 安装anaconda
  以python2的版本为例，下载后有一个名为 Anaconda2-4.4.0-Linux-x86_64.sh 的文件
  安装步骤如下：

  1. 切换到目录下，添加运行权限

sudo chmod +x Anaconda2-4.4.0-Linux-x86_64.sh 

1. 执行安装

./Anaconda2-4.4.0-Linux-x86_64.sh 

这里可以选择安装路径，默认不换的话就直接回车

一路全部选择yes,它会自动把anaconda添加到path中