![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
leoxry
天道酬勤,拼搏一个最好的自己送给未来的自己,每天开开心心敲代码就是一种幸福,不计得失,回归刚开始学习时内心的单纯
展开
-
HDFS - 入门
HDFS简介1 大数据框架体系2 基本概念3 设计目标原创 2019-08-22 16:05:15 · 177 阅读 · 0 评论 -
HDFS - 写流程、读流程
写流程(1)客户端向NameNode发起写数据请求(2)分块写入DataNode节点,DataNode自动完成副本备份(3)DataNode向NameNode汇报存储完成,NameNode通知客户端图示如下:读流程(1)客户端向NameNode发起读数据请求(2)NameNode找出距离最近的DataNode节点信息(3)客户端从DataNode分块下载文件图示如下:...原创 2019-08-31 20:27:10 · 138 阅读 · 0 评论 -
HDFS - 命令
1 edits文件转为xml文件 hdfs oev XML -i /home/hadoop/data/hadoopdata/name/current/edits_0000000000000000004-0000000000000000016 -o /home/edits.xml2 安全模式进入安全模式hdfs dfsadmin -safemode enter查看安全模式hdfs d...原创 2019-08-31 20:33:23 · 159 阅读 · 0 评论 -
Tez - 安装
一、Tez 安装1 下载地址https://mirrors.tuna.tsinghua.edu.cn/apache/tez/0.9.0/2 二进制包安装2.1 解压并重命名[root@hadoop01 ~]# tar -zxvf /home/apache-tez-0.9.0-bin.tar.gz -C /usr/local/[root@hadoop01 ~]# mv /usr/l...原创 2019-09-21 12:02:06 · 1316 阅读 · 0 评论