![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop&spark
文章平均质量分 77
_luckylight
这个作者很懒,什么都没留下…
展开
-
Linux Ubuntu 安装 anaconda3和 Pycharm 社区版本
恰巧大数据实验安装 Anaconda & Pycharm,借此机会写篇博客分享一下Anaconda下载 Anaconda清华镜像网站看一看下载之后,放入 linux文件夹中安装 Anacondabash 下载的文件名之后,按照提示进行输入信息(大多数都是 回车)一定要选择好安装到的目录修改配置文件修改我们的配置文件,将 anaconda 写入环境变量中去然后使他生效source $/.bashrc然后,我们查看是否生效anaconda -V说明可以使用了A原创 2021-05-15 09:54:24 · 574 阅读 · 0 评论 -
ubuntu server安装hadoop和spark,并设置集群
安装server请看本人的上一篇博客Ubuntu Server 20.04.2 安装先前准备工作创建 hadoop用户创建用户之后,输入一下指令重启shutdown -r now登录 hadoop 用户安装 ssh 和 vim首先更新一下 apt 工具sudo apt-get update然后安装vimsudo apt-get install vim安装ssh serversudo apt-get install openssh-server安装 ssh 之后,使用 s原创 2021-05-13 23:39:13 · 294 阅读 · 0 评论 -
RSA公钥体系 与在 ssh中免密的登陆的应用
一、秘钥体系 第一部分查看书籍为 北京大学出版社出版的 丘维声老师的 数学思维方式与创新 在之前安全协议的讲解中,很多的协议都是用了秘钥的这一概念,相信很多同学对这不求甚解,下面我来系统的介绍秘钥体系,并且证明一下如今的公钥私钥RSA密码系统。秘钥,即密钥,在密码学中,密钥(key,又常称金钥)是指某个用来完成加密、解密、完整性验证等密码学应用的秘密信息。在对称密码学(或称密钥密码学)中,加密和解密用的是同一个原创 2021-05-13 09:37:31 · 374 阅读 · 0 评论 -
xshell连接Linux Server
由于server环境下无法使用vmtools,所以推荐使用shell工具进行链接使用。下载的内容源自果核,使用方法:xhell压缩包里面有crack目录,将nslicense.dll文件覆盖到软件目录xhellplus,将nslicense.dll文件分别覆盖到软件Xftp 7目录和Xshell 7目录下载包点击上文shell工具的链接即可下载。现在可以打开 我们安装 pojie 的 xshell然后,我们设置完成之后,点击链接我们输入 who 和 who am I 查看自己原创 2021-05-12 21:46:49 · 244 阅读 · 1 评论 -
虚拟机安装 服务器 Ubuntu Server20.04.2
虚拟机安装 服务器Ubuntu Server20.04.2 下载地址VMware创建新的虚拟机首选选择典型稍后安装操作系统,并点击下一步选择Linux Ubuntu64位命名虚拟机指定虚拟机的容量点击确定之后开启虚拟机选择自己下载的镜像文件打开虚拟机进行配置单击开启此虚拟机,我们进行配置选择合适的语言,这里选择English,选择中文听其他博主说,可能会出现奇奇怪怪的问题选择 donedone设置镜像源地址原创 2021-05-12 10:53:25 · 550 阅读 · 0 评论 -
Ubuntu从零安装 Hadoop And Spark
安装 linux 以Ubuntu为例选择镜像,虚拟机安装虚拟机下,直接安装镜像即可,选择好自己的配置,一定要注意路径名选好,而且和你虚拟机的名称匹配,这里我的镜像是 ubuntu-20.04.2.0-desktop-amd64.iso安装 Hadoop安装 Spark,并使用PySpark测试...原创 2021-05-09 13:59:29 · 1812 阅读 · 8 评论