大数据学习之普通hadoop集群的创建

最新推荐文章于 2024-05-12 00:00:00 发布
最新推荐文章于 2024-05-12 00:00:00 发布
阅读量209 收藏 1
点赞数 1
分类专栏： 分布式搭建 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_52080234/article/details/112613577
版权

前言：

本篇文章针对于2020秋季学期的复习操作，一是对该学期的巩固，二是让老师知道他的努力没有白费，同时，在此感谢徐老师对我们的精心教导…
接https://blog.csdn.net/m0_52080234/article/details/112602778的任务2

整体思路

前提：

注意：若原来hadoop伪分布式集群是启动的，一定要关闭。

删除原来Mymaster节点上的hadoop,还有元数据对应的目录文件
/opt/hadoop
/opt/hadoop-repo
/temp/hadoop-root/*

①准备三台虚拟机

方式1：复制
方式2：clone → 使用vmware自带的clone功能来实施 （推荐）

②修改clone之后的虚拟机的关键配置信息：

ip地址，主机名

③免密码登录

Mymaster 上的root用户 → Mymaster,Myslave01,Myslave02

步骤：
大概的思路是→ 先在master节点上配置好hadoop,然后，跨节点copy到另外两台节点上。

集群规模

在这里插入图片描述

详解：

在Mymaster节点上配置好hadoop：

  • ①JDK,Hadoop环境变量
  • ②修改核心的配置文件：
    hdfs→core-site.xml,hdfs-site.xml
    yarn→yarn-site.xml,mapred-site.xml
  • ③修改hdfs,yarn的两个核心配置shell脚本（若是已经配置了JAVA_HOME,可以省略）
    hadoop-env.sh
    yarn-env.sh
  • ④配置slaves文件，用来定制DataNode守护进程所在的节点
    Mymaster
    Mysalve01
    Myslave02
  • ⑤将master节点上配置好的hadoop跨节点拷贝到另外两台虚拟机上
    scp -r 源 目的地
    如：scp -r /opt/hadoop root@slave01:/opt
  • ⑥在Mymaster节点上格式化namenode
  • ⑦启动集群
  • ⑧确认
    a)进程数
    b)验证hdfs的可用性
    c)验证yarn的可用性

实操开始

删除我们伪分布式的相关数据

在这里插入图片描述
删除当前用户下的隐藏目录之.ssh下的相应文件
在这里插入图片描述
关机

poweroff

我们这里直接克隆两台虚拟机

在这里插入图片描述
在这里插入图片描述
克隆好了先启动Myslave01一台
在这里插入图片描述
由于我们的虚拟机是克隆的所以现在可以在finalShell上用Mymaster的配置连上我们的Myslave01
在这里插入图片描述
修改
/etc/hostname
/etc/hosts
/etc/sysconfig/network
/etc/sysconfig/network-scripts/ifcfg-ens33
windows host文件
我们搭建sentos的时候有详细操作这里就快速带过了

↓Myslave01↓
在这里插入图片描述
关机
poweroff
开启我们的Myslave02
同样的道理我们也可以用Mymaster配置连接我们的Myslave02
在这里插入图片描述
修改
/etc/hostname
/etc/hosts
/etc/sysconfig/network
/etc/sysconfig/network-scripts/ifcfg-ens33
windows host文件
我们搭建Centos的时候有详细操作这里就快速带过了
在这里插入图片描述
关机
在这里插入图片描述
编辑虚拟机（这里自己看情况来我的是16内存的，以下是我的配置）
Mymaster
在这里插入图片描述
Myslave01
在这里插入图片描述
Myslave02
在这里插入图片描述
一切准备就绪，开机！！
在这里插入图片描述
配置finalShell
在这里插入图片描述
在这里插入图片描述
并验证三台是否都能连的上
在这里插入图片描述
并检查名字有没有变
ok我们这里是变成了我们的Myslave01

修改linux中的映射文件，让集群中的每台虚拟机感知到团队中其他成员的存在

[root@Mymaster ~]# vim /etc/hosts
[root@Mymaster ~]# cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.8.201 Mymaster
192.168.8.202 Myslave01
192.168.8.203 Myslave02
[root@Mymaster ~]# scp -r /etc/hosts root@Myslave01:/etc/
The authenticity of host 'myslave01 (192.168.8.202)' can't be established.
ECDSA key fingerprint is SHA256:S18Xnq5jGlaByGMauuqmae8WCIN88kze704KfHa40jY.
ECDSA key fingerprint is MD5:e6:c6:37:60:2d:dd:d3:e5:bd:8d:00:cb:32:38:00:26.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added 'myslave01,192.168.8.202' (ECDSA) to the list of known hosts.
root@myslave01's password: 
hosts                                     100%  229   296.7KB/s   00:00    
[root@Mymaster ~]# scp -r /etc/hosts root@Myslave02:/etc/
The authenticity of host 'myslave02 (192.168.8.203)' can't be established.
ECDSA key fingerprint is SHA256:S18Xnq5jGlaByGMauuqmae8WCIN88kze704KfHa40jY.
ECDSA key fingerprint is MD5:e6:c6:37:60:2d:dd:d3:e5:bd:8d:00:cb:32:38:00:26.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added 'myslave02,192.168.8.203' (ECDSA) to the list of known hosts.
root@myslave02's password: 
hosts                                     100%  229   204.0KB/s   00:00    
[root@Mymaster ~]#

搞定，到了这里我们节点之间的通信
说明是没有问题的！！

配置免密登陆

免密详情介绍请见往期文章
思路→Mymaster 上的root用户 → Mymaster,Myslave01,Myslave02
我这里就配置一下上述免密就感觉比较ok了

配置Mymaster节点的用户root到Mymaster的免密码登录

[root@Mymaster ~]# ll ~/.ssh/
总用量 4
-rw-r--r-- 1 root root 524 1月  13 20:24 known_hosts
[root@Mymaster ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa): 
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:6bIMsRYtZ3lmaDTLLdcu07i/sz7OMLuL7WQnvhprYuM root@Mymaster
The key's randomart image is:
+---[RSA 2048]----+
|                 |
|                 |
|      o          |
|     + * o       |
|    + @ S .      |
|     O B +       |
|    + o @ +      |
|   .+o.@ @o      |
|   oE+*oXBB=     |
+----[SHA256]-----+
[root@Mymaster ~]# ssh-copy-id -i root@Mymaster
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@mymaster's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'root@Mymaster'"
and check to make sure that only the key(s) you wanted were added.

[root@Mymaster ~]# ll ~/.ssh/
总用量 16
-rw------- 1 root root  395 1月  14 16:48 authorized_keys
-rw------- 1 root root 1679 1月  14 16:47 id_rsa
-rw-r--r-- 1 root root  395 1月  14 16:47 id_rsa.pub
-rw-r--r-- 1 root root  524 1月  13 20:24 known_hosts
[root@Mymaster ~]# ssh Mymaster
Last login: Thu Jan 14 16:36:11 2021 from 192.168.8.1
[root@Mymaster ~]# exit
登出
Connection to mymaster closed.
[root@Mymaster ~]#

配置Mymaster节点的用户root到Myslave01的免密码登录

[root@Mymaster ~]# ssh-copy-id -i root@Myslave01
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@myslave01's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'root@Myslave01'"
and check to make sure that only the key(s) you wanted were added.

[root@Mymaster ~]# ssh Myslave01
Last login: Thu Jan 14 16:38:09 2021 from 192.168.8.1
[root@Myslave01 ~]# exit
登出
Connection to myslave01 closed.
[root@Mymaster ~]#

配置Mymaster节点的用户root到Myslave02的免密码登录

[root@Mymaster ~]# ssh-copy-id -i root@Myslave02
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@myslave02's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'root@Myslave02'"
and check to make sure that only the key(s) you wanted were added.

[root@Mymaster ~]# ssh Myslave02
Last login: Thu Jan 14 16:38:16 2021 from 192.168.8.1
[root@Myslave01 ~]# exit
登出
Connection to myslave02 closed.
[root@Mymaster ~]#

搞定！！

正式开始我们的hadoop分布式集群的安装

我们的口号是→上传解压重命名source生效修改配置文件
先弄一台机器的
Mymaster

[root@Mymaster opt]# tar -zxvf hadoop-2.7.6.tar.gz -C ../
[root@Mymaster soft]# cd ..
[root@Mymaster opt]# mv hadoop-2.7.6/ hadoop
[root@Mymaster opt]# cat /etc/profile.d/bigdata-etc.sh 
# 配置jdk环境变量
export JAVA_HOME=/opt/jdk
export PATH=$PATH:$JAVA_HOME/bin

# 配置hadoop环境变量
export HADOOP_HOME=/opt/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
[root@Mymaster opt]# source /etc/profile.d/bigdata-etc.sh 
[root@Mymaster opt]# 
.......

与HDFS相关的配置文件

配置文件详情请见往期文章

↓core-site.xml↓

<configuration>
	<configuration>
     <!-- hdfs的地址名称：schame,ip,port-->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://Mymaster:8020</value>
    </property>
     <!-- hdfs的基础路径，被其他属性所依赖的一个基础路径 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/opt/hadoop/tmp</value>
    </property>
</configuration>
</configuration>

hdfs-site.xml

<configuration>
	<!-- namenode守护进程管理的元数据文件fsimage存储的位置-->
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>file:///opt/hadoop/dfs/name</value>
    </property>
    <!-- 确定DFS数据节点应该将其块存储在本地文件系统的何处-->
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>file:///opt/hadoop/dfs/data</value>
    </property>
    <!-- 块的副本数，连同自身，一共有三个副本 -->
    <property>
        <name>dfs.replication</name>
        <value>3</value>
    </property>
    <!-- 
	 块的大小，一块128M， block ，200M的话，有2个块，第一个块占用了128M，剩余的占用200M-128M 
      大数据领域中，一般存储到hdfs上的资源是经过压缩的，根据不同的压缩算法，压缩率会有所不同。100M ~>100K
	  
	  下述的块的size单位是byte
	  1KB = 1024B
	  1M=1024KB
	-->
    <property>
        <name>dfs.blocksize</name>
        <value>134217728</value>
    </property>
    <!-- secondarynamenode守护进程的http地址：主机名和端口号。参考守护进程布局-->
    <property>
        <name>dfs.namenode.secondary.http-address</name>
        <value>Myslave01:50090</value>
    </property>
</configuration>

与Yarn相关的配置文件
yarn-site.xml

<configuration>

<!-- Site specific YARN configuration properties -->
	<property>
        <name>yarn.nodemanager.aux-services</name>
       <value>mapreduce_shuffle</value>
    </property>
    <!-- 指定resourcemanager的主机名-->
    <property>
        <name>yarn.resourcemanager.hostname</name>
        <value>Mymaster</value>
    </property> 

</configuration>

mapred-site.xml

<configuration>
	<!-- 
	   指定mapreduce使用yarn资源管理器，Yet Another Resource Negotiator
       spark,flink计算资源的调度也可以选用yarn
	-->
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
    <!-- 
	    配置作业历史服务器的地址
		历史服务器: 查看过往的job运行的轨迹和状态信息的
	-->
    <property>
        <name>mapreduce.jobhistory.address</name>
        <value>Mymaster:10020</value>
    </property>
    <!-- 配置作业历史服务器的http地址-->
    <property>
        <name>mapreduce.jobhistory.webapp.address</name>
        <value>Mymaster:19888</value>
    </property>
</configuration>

slaves

[root@Mymaster ~]# vim /opt/hadoop/etc/hadoop/slaves 
[root@Mymaster ~]# cat /opt/hadoop/etc/hadoop/slaves 
Mymaster
Myslave01
Myslave02
[root@Mymaster ~]#

我们现在只是配置了Mymaster节点，所以
将Mymaster节点上配置好的hadoop同步到其他的节点上

[root@Mymaster ~]# scp -r /opt/hadoop/ root@Myslave01:/opt
.....

东西有点多可能要几十秒
然后在Myslave01确认

[root@Mymaster ~]# ssh Myslave01
Last login: Thu Jan 14 16:57:13 2021 from mymaster
[root@Myslave01 ~]# cd /opt
[root@Myslave01 opt]# ll
总用量 0
drwxr-xr-x 9 root root 149 1月  14 17:23 hadoop
drwxr-xr-x 8   10  143 255 9月  23 2016 jdk
drwxr-xr-x 2 root root  67 1月  13 16:59 soft
[root@Myslave01 opt]# exit
登出
Connection to myslave01 closed.
[root@Mymaster ~]#

ok，下面是Myslave02的

[root@Mymaster ~]# scp -r /opt/hadoop/ root@Myslave02:/opt
.......
[root@Mymaster ~]# ssh Myslave02
Last login: Thu Jan 14 16:59:20 2021 from mymaster
[root@Myslave01 ~]# cd /opt/
[root@Myslave01 opt]# ll
总用量 0
drwxr-xr-x 9 root root 149 1月  14 17:27 hadoop
drwxr-xr-x 8   10  143 255 9月  23 2016 jdk
drwxr-xr-x 2 root root  67 1月  13 16:59 soft
[root@Myslave01 opt]# exit
登出
Connection to myslave02 closed.
[root@Mymaster ~]#

好的那么我们的配置文件就搞定了
接着就是格式NN了（详情介绍见往期文章）
由于我们的设计NN是Mymater上的进程，因此我们的格式化当然也是在Mymaster上的

[root@Mymaster ~]# hadoop namenode -format
......

在这里插入图片描述

启动集群

为了安全起见第一次还是分开启动

在这里插入图片描述
在这里插入图片描述
查看hdfs相关的监控页面(本质在访问NameNode进程)
在这里插入图片描述
查看yarn相关的监控页面(本质在访问ResourceManager进程)
在这里插入图片描述

验证（同样的上传→查看→下载→yarn）

在这里插入图片描述

[root@Mymaster input]# yarn jar /opt/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.6.jar wordcount hdfs://Mymaster:8020/input hdfs://Mymaster:8020/output
.........
[root@Mymaster input]# hdfs dfs -cat /output/*
aaa     1
ddasf   1
dfsa    1
dfsaa   1
dfsf    1
sdfs    1

在这里插入图片描述
到了这里我们的机器是没有问题的！！！
最后！！！！关机前要先关集群！！！！
在这里插入图片描述
那么本次复习又结束了！！！
编写于2021-1-14

小|熙
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
大数据之HDFS/Hadoop集群管理
06-09
HDFS是Apache Hadoop项目的一部分，是一个分布式文件系统，用于存储和管理文件，能提高超大文件的访问和存储速度。HDFS采用一次写入多次读取的流式数据访问模式保证了数据的一致性。HDFS是一个高度容错性的系统，...
史上最简单详细的Hadoop完全分布式集群搭建
Mage的博客
10-31 5万+
一.安装虚拟机环境 Vmware12中文官方版 链接：https://pan.baidu.com/s/1IGKVfaOtcFMFXNLHUQp41w 提取码：6rep 激活秘钥：MA491-6NL5Q-AZAM0-ZH0N2-AAJ5A 这个安装就十分的简单了，只需要不断点击下一步，直到安装完成就OK了； 二.虚拟机的安装（Centos7） 这个步骤我分享一个详细安装地址：https://www...
合理建立Hadoop数据库的7个步骤
11-20 294
数据湖的概念起源于大数据的出现——且数据已成为企业的核心资产，Hadoop则是作为存储和管理数据的平台而出现。但是，盲目地投入Hadoop数据湖建设并不一定会使您的企业进入大数据时代——至少不是以一种成功的方式。 在将各种形状和大小的数据资产以非统一方式汇入Hadoop环境或另一个大数据存储库的情况下，尤其如此。这种无序的方法会带来一些挑战和问题，这可能会成为使用数据湖来支持大数据分析应用程序的一...
解决SSH登录时出现Warning: Permanently added告警问题
小菜菜ovo的博客
12-08 4万+
问题: hbase0slave01: Warning: Permanently added the ECDSA host key for IP address 'xxx.xxx.xxx.xxx' to the list of known hosts. 解决办法： 创建~/.ssh/config 文件 vim ~/.ssh/config 在文件中输入下面内容： UserKnownHostsFile ~/.ssh/known_hosts ...
Linux服务器(主机)配置SSH互信---Warning: Permanently added 'slave2,***' (ECDSA) to the list of known hosts警告
热门推荐
Andy的博客
01-20 5万+
 聊聊自己遇到的神坑,实在是哭笑不得,现将其理成笔记发布在博客上以供需要的小伙伴们参考 The authenticity of host 'slave2 (192.168.***)' can't be established. ECDSA key fingerprint is SHA256:Jax0HcY18c6EUe9S7BhwvmY02S86nqg5/j8fcV39WxE. ECDSA k...
启动hadoop时报root@localhost's password: localhost: Permission denied, please try again.错误。
无籽西瓜吃吗的博客
08-22 8362
在装完hadoop及jdk之后，在执行start-all.sh的时候出现 root@localhost's password:localhost:permission denied,please try again。   解决方案： 1.修改root密码：#sudo passwd root 2.辑配置文件，允许以 root 用户通过 ssh 登录：sudo vi /etc/ssh/sshd...
hadoop数据备份
weixin_30776545的博客
02-19 1595
1.如果是安装了hbase,在hbase里也可以备份(网上有)。下面介绍在hadoop下备份hdfs数据(我的也安装hbase) 不是cdh.找自己的配置文件也可以 2.进入这个目录下然后执行下面的命令 [root@aa-cdh-12 dn]#cd /mnt/disk1/dn [root@aa-cdh-12 dn]# tar -cvf /***/nn_backup_d...
如何把同一个key的数据都写入到同一个文件/文件夹中？
zg_hover的专栏
10-23 551
问题的提出 在进行数据处理时，我们经常遇到这样的需求：把同一个key的数据写到同一个文件/文件夹中。 这样，在进行后续的处理，比如查看某个key占的磁盘空间，单独处理某个key的数据等都会非常方便。 解决方案 通过dataframe来解决这个问题很方便。方案就是：通过该key进行分区，这样同一个key的值就都分配到一个分区中了。 val people_rdd = sc.parallelize(Seq((1, "alice"), (1, "bob"), (2, "charlie"))) val people_
大数据教程之搭建Hadoop集群.zip
01-14
大数据教程之搭建Hadoop集群.zip
大数据教程之搭建Hadoop集群.zip_大数据环境搭建hadoop
01-09
大数据教程之搭建Hadoop集群.zip
初学大数据，手动搭建Hadoop集群环境完整学习文档
11-09
初学大数据，如何手动搭建一套集群是很有必要的一件事，因为使用CDH等一键搭建后，不知内部的原理，无法真正的理解其大数据集群的搭建原理，此文档刚好给大家把手动搭建集群的步骤列举出来了
hadoop普通集群搭建
chucancheng5319的博客
02-14 112
一些工具: 1.远程工具xshell 2.文件传输工具winSCP 3.Notpad++安装NppFTP插件 集群搭建：（hadoop，hadoop1，hadoop2） （ /usr/local/tools/ 放置tar包 /usr/local/software 安装软件）...
hadoop环境配置（虚拟机安装、JDK、SSH免密登录）
sducxh
09-07 487
宿主机： 操作系统：Microsoft Windows 7 旗舰版 Service Pack 1 (build 7601), 32-bit 处理器：Intel(R) Core(TM)2 Duo CPU     T5870  @ 2.00GHz 双核 内存：3.00 GB 硬盘：日立 HITACHI HTS543225L9SA00(250GB)  使用时间：5922小时  温度：45℃ ...
跳跃列表 -- SkipList
java小兵
08-06 2万+
前言 我们先回顾一下在有序序列中查找某个特定元素的情境： 如果该序列使用支持随机访问的数组存储，那我们通过二分查可以很快地找到某个元素。 但是考虑到增加、删除的效率以及内存空间的使用，很多时候我们会使用不支持随机访问的链表存储，那么我们查询某个元素时就只能遍历整个链表。 综合考虑查询和增加、删除操作，我们通常会使用二叉搜索树存储，这样我们就可以不依赖随机访问特性来进行二分查找了。 普通的二叉搜索树插入元素越有序效率越低，最坏情况会退化回链表，为了解决这个问题，我们采用平衡二叉树来存储，以保证在任何
hadoop，普通集群部署，高可用集群部署
narata1的博客
10-22 162
基础配置 切换清华源 备份，将 CentOS-Base.repo 为CentOS-Base.repo.backup cp /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 编辑 /etc/yum.repos.d/Centos-Base.repo # CentOS-Base.repo # # The mirror system uses the connecting IP address of the cli
WPF TextBox文本框 输入提示
SJ15630070060的博客
05-08 349
WPF绑定如果是同类型可以直接生效，如果不是同类型则要求有Converter，下述类型是内置的，顾名思义就是bool到Visibility的转换器，注意Visibility是枚举值，有3个值，不是bool，因此需要转换。TextBox文本的背景颜色设置为透明，不然会无法看到 Label 内容。Grid标签里面创建Label和TextBox，这是一个整体。TextBox 不为空隐藏 Label。指定TextBox 的 Name 元素名称。TextBox 为空显示 Label。两个标签的前后顺序。
【大数据·hadoop】在hdfs上运行shell基本常用命令
Yaoyao2024的博客
05-11 1004
在Hadoop生态系统中，supergroup 是一个默认的用户组，通常与HDFS的超级用户（即 Hadoop 的管理员账户，类似于 Unix 系统中的 root 用户）关联。超级用户和属于 supergroup 组的用户通常有着对HDFS上所有文件和目录的全权限，这包括读取、写入和执行权限。
计算机毕业设计Python地震预测系统 地震数据分析可视化 地震爬虫 大数据毕业设计 Flink Hadoop 深度学习 机器学习 人工智能 知识图谱
最新发布
从业计算机毕业设计10年，打算用一年时间分享10年毕设经验！
05-12 850
计算机毕业设计Python地震预测系统 地震数据分析可视化 地震爬虫 大数据毕业设计 Flink Hadoop 深度学习 机器学习 人工智能 知识图谱
大数据hadoop集群虚拟机环境下载
05-13
接着，按照hadoop集群的架构，创建多个虚拟机并安装好基本的软件和配置，最后再进行hadoop、hive、hbase等大数据软件的安装和配置。但这种方法需要自行掌握虚拟机、Linux及大数据技术，有较高的门槛，适合专业人员。...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值