CDH(Hadoop)集群磁盘扩容

1.在Linux本地挂在磁盘

(目前网络部在Linux本地上挂载磁盘,此过程大数据平台这边还没测通,后期测通补上此步骤操作。)

2.在磁盘挂载目录下创建文件夹“/dfs/dn”

mkdir -p /media/New/dfs/dn

173148_jcc2_3197158.png 

3.对目录进行赋权限

chown -R hdfs:hadoop /media/New/dfs/dn

173204_jawH_3197158.png 

4.悬挂新磁盘到hdfs数据目录下

第一:在cloudera manager主页面上点击HDFS

173222_niuJ_3197158.png 

第二:选择配置

173241_oZ2h_3197158.png

第三:选择DataNode----->+----本地挂在磁盘的数据目录放到新框中”/media/New/dfs/dn”

173300_fr1i_3197158.png 

第四:点击保存更改

173315_SA1N_3197158.png

第五:重启集群,使挂载的磁盘生效,注意集群重启过程中一定不要中止。

173343_VosN_3197158.png 

第六:测试新挂磁盘是否被HDFS识别使用

向hdfs写一部分数据,然后在Linux本地使用“df -lh”,查看悬挂的磁盘使用量是否有变化,如果被使用指标在增加,说明磁盘已经被hdfs识别并使用。

转载于:https://my.oschina.net/u/3197158/blog/1523664

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
CDH磁盘挂载及磁盘扩容可以通过以下步骤完成: 1. 确认硬盘已经添加到服务器上,并且硬件已经被识别。可以使用命令 `fdisk -l` 查看服务器上的硬盘信息。 2. 对于新添加的硬盘,需要进行分区和格式化。可以使用命令 `fdisk /dev/sdX`(X为新添加的硬盘标识,如sdb、sdc等)进入分区工具,按照提示进行分区操作。完成分区后,使用命令 `mkfs.ext4 /dev/sdX1`(X为新添加的硬盘标识,1为第一个分区)格式化分区。 3. 创建一个目录作为挂载点,例如 `/data`,可以使用命令 `mkdir /data` 创建。 4. 使用命令 `mount /dev/sdX1 /data` 将新添加的硬盘挂载到 `/data` 目录下。如果需要在系统启动时自动挂载,可以在 `/etc/fstab` 文件中添加一行 `/dev/sdX1 /data ext4 defaults 0 0`。 5. 确认挂载成功,可以使用命令 `df -h` 查看挂载点 `/data` 的文件系统。 如果需要扩容已挂载的磁盘,可以按照以下步骤进行: 1. 确认硬盘已经添加到服务器上,并且硬件已经被识别。 2. 使用命令 `parted /dev/sdX`(X为已挂载的硬盘标识,如sdb、sdc等)进入分区工具。 3. 输入 `resizepart 1` 命令来调整已挂载磁盘的分区大小。 4. 输入 `quit` 退出分区工具。 5. 使用命令 `resize2fs /dev/sdX1`(X为已挂载的硬盘标识,1为第一个分区)来调整文件系统大小。 完成上述步骤后,已挂载磁盘的容量就会扩大。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值