Hadoop
zhangrh9797
这个作者很懒,什么都没留下…
展开
-
Hadoop_HDFS的HA配置(图文详细)【转载】
原文链接https://blog.csdn.net/qq_42679299/article/details/103893282原创 2020-02-13 12:47:49 · 139 阅读 · 0 评论 -
Hdfs学习(edits日志文件和fsimage文件)【转载】
原文链接:https://blog.csdn.net/qq_43295093/article/details/84945285原创 2020-01-12 21:32:33 · 214 阅读 · 0 评论 -
hdfs上传和下载文件的流程
一、上传文件1、客户端上传文件客户端向namenode发送数据上传的请求(包含数据的长度信息)hadoop fd -put / / (以上传200M文件为例)2.namenode检查工作namenode收到客户端请求之后会进行一系列的检查工作查重处理,如果重复则报错 验证上传文件的目标目录是否存在,不存在报错 检查权限 ...3.返回检查信息到客户端第二部...原创 2020-01-11 22:06:16 · 1810 阅读 · 0 评论 -
hadoop的四大机制
一、心跳机制namenode是负责管理整个集群的,所以必须要知道各个节点的状况。那么问题来了1.namenode怎么知道从节点的存活?答:datanode每间隔3秒会主动给namenode发送一次心跳报告,汇报自己的状况补充:心跳间隔3秒的设置来源于配置文件 >> value 决定间隔时间:<property> <name>dfs.h...原创 2020-01-11 15:06:04 · 334 阅读 · 0 评论