Hadoop-HDFS简介与客户端基本命令使用

HDFS基本功能

基本功能
有文件系统的基本操作功能；
文件块为单位
将数据存储在不同的机器磁盘上
大的数据切块默认128M，3个副本
NameNode 主节点：维护虚拟目录 ，管理子节点(Secondly NameNode) 存储资源的调度，与客户端交互
DataNode 从节点多个：存数据,启动时会向主节点注册，主节点会掌握它的信息，方便以后调用
（DataNode 从节点集群满足的基本条件：Linux01,02,03…之间 ip 域名 免密设定好。因为节点之间是要通信的）
Linux01:NameNode DataNode
Linux02:DataNode
Linux03:DataNode

客户端基本命令使用

1. 位置 bin/hdfs dfs 其中是一些命令
2. 上传：hdfs dfs -put ./ 到 / (前面是本地路径，后面是hdfs路径)
3. 查看目录：hdfs dfs -ls / (查看分目录下的文件，其他路劲同理)
4. 创建文件夹： hdfs dfs -mkdir /data (在根目录下创建文件夹)
5. 查看文件内容：hdfs dfs -cat 文件路径
6. 从hdfs下载：hdfs dfs get /data/1.txt / (前面是hdfs路径 后面是本地路径)