windows+pycharm+pyspark+linux远程开发环境搭建

本文介绍了如何在Windows上使用PyCharm通过SSH连接Linux,搭建PySpark开发环境。首先,详细讲述了在Linux上下载、安装Anaconda,创建pyspark虚拟环境,并安装Spark。然后,配置Spark环境变量。最后,在PyCharm中新建项目,设置远程解释器,完成远程开发环境的搭建。
摘要由CSDN通过智能技术生成

Anaconda liunx版本下载

Anaconda | The World’s Most Popular Data Science Platform

Anaconda linux版本安装

上传文件到虚拟机安装目录下

在安装目录下运行程序

sh ./Anaconda3-2021.11-Linux-x86_64.sh

按回车继续,之后按空格一直到 yes/no 输入yes 再之后输入需要安装的目录 之后就等待安装完成

Anaconda换源

sudo gedit ~/.condarc

添加内容

channels:
  - defaults
show_channel_urls: true
default_channels:
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/msys2
custom_channels:
  conda-forge: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  msys2: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  bioconda: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  menpo: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  pytorch: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  pytorch-lts: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
  simpleitk: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud

重新打开一个终端可以发现在命令行前边多了一个base 输入python即可看见如下信息 输入exit()退出python

(base) wl@wl:/home/loca
  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值