脚本编辑器
文章平均质量分 84
公众号【禅与大数据】,欢迎订阅
禅与大数据
展开
-
安装流行脚本编辑器(jupyter notebook)流程
jupyter notebook是一个流行的轻量的在线代码编辑器,可支持几十种程序语言. jupyter notebook 功能也很丰富,做文档,数据科学分析,计算都非常方便. jupyter notebook在window|linux上都有发行.window安装非常简单,linux安装比较复杂,本人为了安装jupyter notebook花了不少时间,现把教程分享一下.安装python2.7安原创 2017-11-26 13:24:43 · 2602 阅读 · 0 评论 -
通过jupyter远程编写代码,并远程提交到spark集群执行
几个月前折腾了一番jupyter(web 代码编辑器),感觉jupyter在编写某些科学文章是比较灵活.不过几乎是单机版的,在生产环境应用有限.之前因为需要在集群上执行编辑的代码,遂查找资料,又折腾了一番,使得jupyter可以应用于集群环境.我们的需求类似使用者可以写点简单的程序,然后在集群上面执行代码. 程序是python语言的.所以,集群是pyspark集群.在spark包下面,会有pysp...原创 2018-03-03 18:08:32 · 6074 阅读 · 1 评论