看黑马网课记录
第二章-wwww操]使用命令操作HDFS文件系统_哔哩哔哩_bilibili
HDFS
1.什么是HDFS
hadoop三大组件之一,负责海量数据的分布式存储
2.HDFS架构角色:
- 主节点(领导):NameNode
- 从节点(员工):DataNode
- 主节点辅助(秘书):SecondarynameNode
3.HDFS基础架构:
HDFS Shell操作
1.启停操作
一键启停
$HADOOP_HOME/sbin/start-dfs.sh
$HADOOP_HOME/sbin/stop-dfs.sh
单个启停
1. $HADOOP_HOME/sbin/hadoop-daemon.sh 脚本
hadoop-daemon.sh +(start、status、stop)+ 节点名称
2. $HADOOP_HOME/bin/hdfs 程序
hdfs --daemon +(start、status、stop)+ 节点名称
2.文件系统操作(与linux相似)
两套命令:
老版本:hadoop fs (options)
新版本:hdfs dfs (options)
1.创建
2.查看
3.文件上传
本地—>hdfs