02_jupyterLab_windows设置pyspark

01_windows10配置spark与pyspark
02_jupyterLab_windows设置pyspark
03_jupyternotebook_windows设置pyspark

1.什么是Jupyter

Project Jupyter exists to develop open-source software, open-standards, and services for interactive computing across dozens of programming languages.[
Jupyter计划的存在是为了开发开放源码软件,开放标准并且为十几种编程语言提供互动式计算服务。

2.JupyterLab环境配置

无论是在Windows,WSL还是Linux中配置python+Jupyter Lab环境都是是比较简单的,配置完Python后在命令提示符中输入:

pip install jupyterlab

等待安装完成。安装完成后使用命令

jupyter lab

将会自动打开浏览器进入到jupyterlab。使用WSL的需要手动输入链接才能进入环境链接最后一段会显示token,复制输入进去才行。下次再从WSL中打开时可在地址栏中输入jupyterlab会自动提示,不需要再次输入token了。

3.中文界面配置

下面介绍如何将jupyterlab的语言改为中文在终端或命令行中输入

pip install jupyterlab-language-pack-zh-CN

安装完成之后还需要进入到jupyterlab工作环境中找到setting->language选择中文重新加载环境即可。

在这里插入图片描述

4.更改工作目录

由于jupyterlab默认的工作目录可能不符合一些人的要求我们可以手动更改工作目录。在Windows和Linux中操作相同。 首先要找到jupyterlab默认配置文件的位置,输入命令
在这里插入图片描述
给出配置文件位置后我们可以打开它,找到

#  Default: 'C:\\Users\\Administrator\\.jupyter\\lab\\workspaces'
 c.LabApp.workspaces_dir = 'D:\\jupyterlab'

D:\jupyterlab

5、配置在Jupyter Lab中运行PySpark

配置之前保证已经安装了jupyter lab,不确定的可以使用conda list查看一下

conda list

在这里插入图片描述
没有安装的话使用conda install jupyterlab进行安装
在Windows下配置的话直接修改环境变量即可
PYSPARK_DRIVER_PYTHON
在这里插入图片描述
PYSPARK_DRIVER_PYTHON_OPTS
在这里插入图片描述
在这里插入图片描述

6、启动pyspark

运行cmd,输入 pyspark
在这里插入图片描述

出现以上界面的话恭喜你圆满配置成功
接下来新建一个文件输入sc运行一下,出现如下结果则代表以及能够正常使用pyspark的功能了
在这里插入图片描述

参考引用

https://blog.csdn.net/one_a_xiaobai/article/details/105508967

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

雪龙无敌

你的鼓励是我们一起前进的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值