BlessingXRY的博客

HDFS简介 1 大数据框架体系 2 基本概念 3 设计目标

写流程 （1）客户端向NameNode发起写数据请求 （2）分块写入DataNode节点，DataNode自动完成副本备份 （3）DataNode向NameNode汇报存储完成，NameNode通知客户端 图示如下： 读流程 （1）客户端向NameNode发起读数据请求 （2）NameNode找出距离最近的DataNode节点信息 （3）客户端从DataNode分块下载文件 图示如下： ...

1 edits文件转为xml文件 hdfs oev XML -i /home/hadoop/data/hadoopdata/name/current/edits_0000000000000000004-0000000000000000016 -o /home/edits.xml 2 安全模式 进入安全模式 hdfs dfsadmin -safemode enter 查看安全模式 hdfs d...

一、Tez 安装 1 下载地址 https://mirrors.tuna.tsinghua.edu.cn/apache/tez/0.9.0/ 2 二进制包安装 2.1 解压并重命名 [root@hadoop01 ~]# tar -zxvf /home/apache-tez-0.9.0-bin.tar.gz -C /usr/local/ [root@hadoop01 ~]# mv /usr/l...