docker配置pyspark并打开jupyter lab

1)下载docker desktop

2)拉取docker镜像jupyter/all-spark-notebook,如果要使用国内镜像,那么在之前加前缀,

比如用docker.registry.cyou  即是  docker.registry.cyou/jupyter/all-spark-notebook

完整docker命令:两种,第一个是没用国内镜像(需要vpn),第二个是用了。下一个就行了,不要下两次。

docker pull jupyter/all-spark-notebook

docker pull docker.registry.cyou/jupyter/all-spark-notebook

演示如下:由于我已经下好了,则是下面这个画面。没下的画面应该会有进度条

拉取镜像还可以在docker页面搜索,点拉取即可

3)创建容器

演示代码如下:

docker run -p 8888:8888 -v /e/sparkdata:/home/jovyan/work docker.registry.cyou/jupyter/all-spark-notebook

代码解释:

-p 8888:8888 表示将主机的端口 8888 映射到容器的端口 8888,Jupyter Notebook 默认在容器的 8888 端口运行,因此通过将容器的 8888 端口暴露给主机,主机可以通过浏览器访问 Jupyter Notebook。

/e/sparkdata 为本地的路径(根据自己需求修改)

/home/jovyan/work是容器中的路径(根据自己需求修改)

docker.registry.cyou/jupyter/all-spark-notebook 镜像名字,原来的是jupyter/all-spark-notebook,注意区分。

启动之后会有一个日志:

用第二个url地址,如上图,复制到浏览器即可打开jupyterLab

4)若要重新启动容器,记住url,或者按照下面流程

docker ps -a

观察container id是什么:be9e1050ca8e(例) 即为你所创建的容器id。

依次输入下面的命令:

docker start <container_id或name>

docker logs <container_id或name>

在log日志中找到之前的url,就能重新进入了。

要在Anaconda Docker打开Jupyter,您可以按照以下步骤操作: 1. 首先,确保您已经安装了Docker并成功启动了Docker服务。 2. 打开终端或命令提示符,并运行以下命令从Docker Hub下载Anaconda镜像: ``` docker pull continuumio/anaconda3 ``` 3. 下载完成后,运行以下命令启动一个新的容器打开Jupyter Notebook: ``` docker run -it -p 8888:8888 continuumio/anaconda3 /bin/bash -c "jupyter notebook --ip='0.0.0.0' --port=8888 --allow-root" ``` 这将启动一个新的容器,并将主机的8888端口映射到容器的8888端口。您可以根据需要更改主机端口。 4. 在终端中,您会看到类似于以下内容的输出: ``` [I 08:58:17.293 NotebookApp] Writing notebook server cookie secret to /root/.local/share/jupyter/runtime/notebook_cookie_secret [I 08:58:17.836 NotebookApp] JupyterLab extension loaded from /opt/conda/lib/python3.8/site-packages/jupyterlab [I 08:58:17.836 NotebookApp] JupyterLab application directory is /opt/conda/share/jupyter/lab [I 08:58:17.837 NotebookApp] Serving notebooks from local directory: /notebooks [I 08:58:17.837 NotebookApp] Jupyter Notebook 6.4.3 is running at: [I 08:58:17.837 NotebookApp] http://(xxx or 127.0.0.1):8888/?token=xxx [I 08:58:17.837 NotebookApp] or http://(xxx or 127.0.0.1):8888/?token=xxx [I 08:58:17.837 NotebookApp] Use Control-C to stop this server and shut down all kernels (twice to skip confirmation). ``` 5. 复制其中一个URL(类似于`http://(xxx or 127.0.0.1):8888/?token=xxx`)到您的Web浏览器中,并在其中输入密码。默认密码是`root`。 6. 在Jupyter Notebook的界面中,您可以创建、编辑和运行代码。 请注意,关闭终端窗口将停止并删除正在运行的容器。如果您希望在后台运行容器,请使用`-d`标志: ``` docker run -it -p 8888:8888 continuumio/anaconda3 /bin/bash -c "jupyter notebook --ip='0.0.0.0' --port=8888 --allow-root" -d ``` 这样,容器将在后台运行,并且您可以使用`docker stop`命令手动停止它。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值