(四)Alluxio 卸载挂载目录和删除文件

(一)Linux下 Alluxio 的编译和运行

(二)Alluxio 挂载和 fs ls

(三)Alluxio 的挂载和加载

(四)Alluxio 卸载挂载目录和删除文件

(五)编译中出现的向后兼容问题

卸载:把以前加载到 Alluxio 根目录下的路径卸载,然后,底层存储系统的目录和 Alluxio 中的目录没有关系了。

删除:把 Alluxio 中的普通文件(master 节点或者 worker 节点)中的文件从 Alluxio 中移出,但是并不会在底层存储系统中删除该文件。如果将挂载目录删除了,也就没有这个挂载节点了。

1. 卸载挂载目录 fs unmount

卸载一个在 Alluxio 中已经挂载的目录,并确认该目录已经在Alluxio命名空间中被删除,但是不会删除底层存储系统中的文件。

注意:

  • 卸载的这个路径要是之前挂载的路径,挂载过的路径在挂载表中查询。
  • 想要将一个普通的文件从 Alluxio 中移出,使用的是删除 rm ,而不是卸载挂载。
bin/alluxio fs unmount /apache

Alluxio Master 节点的 web 界面查到有一个挂载节点,是将本地的 /home/ubuntu/test-dir 路径挂载到了 Alluxio/pic 路径。现在将这个挂载节点卸载。

image.png

卸载后的结果:

image.png

Alluxio Master 的 web 界面也不不会显示这个挂载节点。

image.png

2. 删除文件

# 删除文件
bin/alluxio fs rm [文件名]

# 删除目录
bin/alluxio fs rm -r [目录名]

删除文件的效果如下:

image.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Alluxio(以前称为Tachyon)是一个虚拟的分布式存储系统。它弥合了计算框架和存储系统之间的鸿沟,使计算应用程序可以通过公共接口连接到众多存储系统。Alluxio项目源自加州大学伯克利分校AMPLab的一个名为Tachyon的研究项目,该项目是伯克利数据分析堆栈(BDAS)的数据层。 Alluxio大数据存储系统的功能: 1、灵活的文件API:Alluxio的本地API类似于java.io.File类,提供了 InputStream和OutputStream的接口和对内存映射I/O的高效支持。我们推荐使用这套API以获得Alluxio的完整功能以及最佳性能。 2、兼容Hadoop HDFS的文件系统接口:基于这套接口Hadoop MapReduce和Spark可以使用Alluxio代替HDFS。 3、可插拔的底层存储:Alluxio支持将内存数据持久化到底层存储系统。Alluxio提供了通用接口以简化对接不同的底层存储系统。目前Alluxio支持Microsoft Azure Blob Store,Amazon S3,Google Cloud Storage,OpenStack Swift,GlusterFS, HDFS,MaprFS,Ceph,NFS,Alibaba OSS,Minio以及单节点本地文件系统,后续也会支持更多其他存储系统。 4、Alluxio层级存储:Alluxio可以管理内存和本地存储如SSD和HDD,以加速数据访问。如果需要更细粒度的控制,分层存储功能可以用于自动化管理不同层之间的数据,确保热数据在更快的存储层上。自定义策略可以方便地应用到Alluxio,而且pin(钉住)的概念允许用户显式地控制数据的存放位置。 5、统一命名空间:Alluxio可以通过挂载功能实现不同存储系统之间的高效数据管理。并且,透明命名机制在持久化存储对象到底层存储系统时可以保留存储对象的文件名和目录层次结构。 6、Web UI:用户可以通过Web UI浏览文件系统。在调试模式下,管理员还可以查看每一个文件的详细信息,包括存放位置,检查点路径等。 7、命令行:用户也可以通过./bin/alluxio fs与Alluxio交互,例如:实现将数据从文件系统拷入拷出。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值