Oracle VM VirtualBox给hadoop扩容

本文详细介绍了如何在Oracle VM VirtualBox中为虚拟机添加硬盘,并通过fdisk进行分区和格式化。然后,展示了如何挂载新硬盘,并将其永久挂载到系统中。接着,文章说明了在Hadoop环境中配置DataNode节点,增加数据存储容量的步骤,包括修改hdfs-site.xml配置文件。最后,提到了在系统重启后保持挂载状态的方法。
摘要由CSDN通过智能技术生成

1、添加磁盘

虚拟机增加一块硬盘,重启虚拟机以加载硬盘:打开Oracle VM VirtualBox,选择要添加的虚拟机-设置-存储-选择控制器:SATA-添加虚拟硬盘,配置好后即多了一块硬盘。

2、挂载磁盘

    1)查看所有磁盘:fdist -l

没有的话,需重启虚拟机或者进入到 /dev文件夹下 ,使用 ll |grep sd 命令可以看到有新增一个sdb,这就是新加的硬盘的配置文件

    2)使用fdisk对sdb进行配置

        1> fdisk sdb //进入配置菜单 输入m可以查看命令提示

        ​ 2>n //添加分区

        ​ 3>p //添加的分区类型为主分区

​         4>1 //第几个主分区

​         5>直接按回车 //从第几个扇区开始 默认是2048

​         6>直接回车 //分配的大小 默认是全部

​         7>w //保存修改并退去配置菜单

    3)新建一个文件夹,将新磁盘配置的分区和该文件夹绑定(挂载)

        mkfs -t ext4 /dev/sdb1

        cd /dev/mapper

        [root@localhost mapper]# mkdir -p sdb1

        [root@localhost mapper]# mount /dev/sdb1 /dev/mapper/sdb1/

        df –h:查看到已经把dev/sdb1 挂载到了/dev/mapper/sdb1/

3、配置hadoop datanode节点,增加datanode存储容量

    1)永久挂载,重启之后也不会失效

        [root@localhost mapper]# vim /etc/fstab

​         最下方加入一行代码:​ /dev/sdb1 /sdb1 xfs defaults 0 0 //添加配置

        注:添加以上配置上,再重启系统很容易进入emergency mode

        方法2:mount /dev/sdb1 /dev/mapper/sdb1/

    2)修改hdfs-site.xml 加入如下配置

       cd /root/training/hadoop-2.7.3/etc/hadoop

       vim hdfs-site.xml

       <property>

        <name>dfs.datanode.data.dir</name>

        <value>/dev/mapper/sdb1/data,/root/training/hadoop-2.7.3/tmp/dfs/data</value>

       </property>

    3)重启hadoop

       cd /root/training/hadoop-2.7.3/sbin

       ./start-dfs.sh

 

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值