HDFS
alidxy
学习如逆水行舟,不进则退
展开
-
HDFS的shell操作
基本语法 hadoop fs 命令 OR hdfs dfs 命令 通过 hadoop fs或者hdfs dfs 可以看到一些具体的参数 也可以通过help帮助,查看命令的具体参数 HDFS上传下载 # 创建文件夹 hadoop fs -mkdir /test # 上传 # 剪切本地文件到hdfs中 hadoop fs -moveFromLocal test.txt /test/ # 拷贝本地文件到hdfs中 hadoop fs -copyFromLocal test.txt /test/ #原创 2021-10-20 16:22:33 · 1342 阅读 · 0 评论 -
HDFS概述
HDFS的产生和定义 HDFS的定义和产生 HDFS(Hadoop Distributed File System)是一个分布式的文件系统,用于存储文件,通过目录树(跟linux目录结构是一样的)的方式来定位文件,可以单台,也可以多台分布式存储 随着数据量越来越大,一台机器存不下所有的数据,那么就需要多台服务器去存储,例如:一台机器10T的空间,现在有一个100T的数据,那么就需要多台服务器去分别存储这个文件,但是存储之后不方便管理和维护。所以就出现了分布式文件管理系统,HDFS就是其中之一 HDFS的使用原创 2021-10-20 11:46:38 · 376 阅读 · 0 评论