【Alluxio+HDFS集群系列-3】测试Alluxio+HDFS(Hadoop-2.7.7)集群性能(2)

【Alluxio集群系列】测试Alluxio+HDFS(Hadoop-2.7.7)集群性能(1)测试了“3.1.1 上传文件到Alluxio文件系统”“3.1.2 Alluxio文件固化到HDFS”

一、目的:

测试Alluxio+HDFS(Hadoop-2.7.7)集群性能。

二、环境:

2台虚拟机,CentOS Linux release 7.5.1804 (Core),内存3G,硬盘45G。

192.168.10.156,hmaster156,alluxio slave

192.168.10.162,hslave162,alluxio master

三、测试过程:

3.1  数据读写

3.1.3 释放Alluxio的文件

在本地(hslave162节点/usr/local/alluxio-for-hadoop-2.7.7/performance_test/路径下)创建测试文件release-from-alluxio_test.txt,并上传到alluxio的文件系统(/alluxio/data/目录)下。

在hslave162节点/usr/local/alluxio-for-hadoop-2.7.7/bin/路径下,以hadoop用户执行以下命令:

# 释放文件
./alluxio fs free /release-from-alluxio_test.txt

free并不会删除底层存储HDFS上的文件:

 3.1.4 重新加载HDFS文件到Alluxio文件系统

在hslave162节点/usr/local/alluxio-for-hadoop-2.7.7/bin/路径下,以hadoop用户执行以下命令:

# 注意此处release-from-alluxio_test.txt的路径并非在HDFS的路径,仍然是在Alluxio的路径
./alluxio fs load /release-from-alluxio_test.txt

3.1.5 删除Alluxio的文件 

在hslave162节点/usr/local/alluxio-for-hadoop-2.7.7/bin/路径下,以hadoop用户执行以下命令:

./alluxio fs rm /alluxio2hadoop_test.txt

rm会同时删除底层存储HDFS上的文件。

集群性能测试部分未完待续。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值