weixin_46439229的博客

原创 mac+anaconda+spark+jupyter notebook

文章开始前，首先记录下应用场景：处理百万级别数量级的4GB数据，本菜鸟长期使用jupyter notebook进行简单算法训练以及数据分析等工作。在Jupyter notebook中使用conda创建的python虚拟环境中安装pyspark并且使用。