Hadoop作为入门大数据必须学习的知识,大数据也是从Hadoop学起的,据我所知,在市面上有三款Hadoop:
1.Hadoop的原生,去Hadoop的官网下载即可
2.CDH版本的Hadoop
3.HDP版本的Hadoop
后面两种版本的Hadoop比原生的Hadoop更具有兼容性,在博主这里,我选择的是基于CDH版本的Hadoop版本,就让我们进入安装的正题吧
第一步:浏览器打开网址https://archive.cloudera.com/cdh5/cdh/5/,得到的是如下页面:
在这里我们需要下载Hadoop,博主在这里选择的是hadoop-2.6.0-cdh5.15.1.tar.gz,所以按住ctrl+F进行搜索即可,具体的演示如下图:
这里可以提供两种下载的版本,第一种是直接点击这个安装包,浏览器即可下载到本地的电脑,但是你需要根据某些工具(FTP,Xftp等等)上传到你的Linux上;第二种就是右键点击选中的安装包复制其链接的地址,打开Linux的终端使用如下
的命令即可下载此版本:
wget https://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz
具体的操作如下图(我这里使用的是xshell的ssh工具,类似的ssh工具都是可以的):
经过漫长的等待,即可得到此安装包,如下图:
第二步:在得到这个压缩包之后,我们需要进行解压,我这里是解压到了个人的/home/app路径(这个路径根据个人喜欢的来啊)下面,代码如下:
tar -zxvf hadoop-2.6.0-cdh5.15.1.tar.gz -C /home/app/
我们到解压后的目录去查看一下:存在了hadoop的文件夹
我们还需要讲解一个小的知识点,SSH免密登录,按照下面的操作来即可:
在配置Hadoop环境之前我们需要使用SSH免密登陆命令:
ssh-keygen -t rsa一路回车即可
然后输入命令ll -la会看到一个.ssh文件(根目录下)
进入到这个.ssh目录之后,我们可以看到如下图的内容:
在这里我们使用一个命令即可完成对ssh免密操作:
cat id_rsa.pub >> authorized_keys
至此我们已经将需要的Hadoop版本下载到Linux服务器上了,下一篇博客我们讲解如何配置Hadoop的相关文件和参数,然后启动其HDFS(分布式文件系统).
下一篇博客地址:https://blog.csdn.net/qq_32575047/article/details/102511213