HDFS分享
叹了口丶气
专注于大数据技术,Hadoop、HBase、Spark、Kafka、ZK、Flink、Alluxio等
展开
-
【Git】git fetch或者pull时总是提示超时。443或者22端口
【Git】git fetch或者pull时总是提示超时。443或者22端口原创 2024-01-22 09:36:34 · 487 阅读 · 0 评论 -
想看HDFS哪里的源码解析?欢迎评论区留言。
想看HDFS哪里的源码解析?欢迎评论区留言。原创 2022-08-03 18:23:58 · 210 阅读 · 8 评论 -
【Yarn】Yarn在Ambari中的相关metrics
【Yarn】Yarn在Ambari中的相关metrics原创 2022-04-02 11:24:40 · 297 阅读 · 0 评论 -
【HDFS】写数据时,下游Datanode的ack是在落盘时还是在网络收到数据时发出的?
【HDFS】写数据时,下游Datanode的ack是在落盘时还是在网络收到数据时发出的?原创 2022-04-02 09:46:16 · 350 阅读 · 0 评论 -
【HDFS】Observer Namenode开启in-progress tail之后导致误删除in-progress状态的editlog问题
【HDFS】Observer Namenode开启in-progress tail之后导致误删除in-progress状态的editlog问题原创 2022-03-17 14:21:48 · 721 阅读 · 0 评论 -
【精】彻底熟悉Hadoop RPC框架
学习HDFS绕不开的一个重要的知识点就是Hadoop RPC框架。但是能将RPC框架从客户端->服务端,再从服务端到客户端这一套通信脉络顺着讲明白的资料很少。不少都是给出各个类的定义啊,调用了什么方法啊,很难让读者直观的理解Hadoop RPC框架。因此决定写这样一篇文章,我觉得只要认真读这篇文章,同时跟着本文的流程走一遍,掌握Hadoop RPC框架绝对是不在话下。 本文通过流程图+文字详细的介绍了Hadoop RPC框架。本文首先从DFSClient出发,追踪一个RPC请求的传播路径,以此对Had原创 2021-08-08 12:58:17 · 1231 阅读 · 0 评论