自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

油纸雨伞的博客

  • 博客(44)
  • 资源 (2)
  • 收藏
  • 关注
排序：
按最后发布时间
按访问量
RSS订阅

原创 Spark学习笔记【shuffle】

Spark Shuffle

2023-05-06 00:04:59 740 1

原创 K8S网络探究

重度参考凤凰架构和Kubernets in Action，目的是了解K8S里面网络如何设计的，以及选用的原则。为了解决容器网络问题:容器和容器容器和宿主机跨物理机的容器通信容器间网络如何通信?主机模式: 使用宿主机的网络，没有隔离。(个人感觉不能和其他的隔离的网络进行通信。容器模式：加入到已有的容器网络overlay模式: calico使用ip on ip进行网络隔离和通信，新能损耗在20%。

2023-04-26 11:23:28 647

原创 HDFS学习笔记 【Namenode/DN管理】

DN管理管理了什么？NN上如何表示DNDN存储和块的关系梳理DatanodeManager存储类。

2023-04-13 06:41:05 375 3

原创 HDFS学习笔记 【Namenode/数据块管理】

Namenode数据块管理

2023-04-10 23:20:26 531 1

原创 HDFS学习笔记【Datanode/数据块扫描器】

hdfs2.x 块扫描

2023-04-07 14:35:22 488

翻译 Hadoop官网翻译【HDFS datanode admin】

hdfs datanode 下线，进入维护模式等

2023-04-07 09:31:36 57

原创 HDFS学习笔记【Datanode/写数据】

hdfs datanode写数据

2023-04-06 14:54:32 504

原创 HDFS学习笔记【Datanode/读数据】

datanode读数据

2023-04-04 11:17:51 224

原创 HDFS学习笔记【Datanode/流式接口】

hdfs datanode 流式接口框架

2023-04-03 14:23:12 170

翻译 Hadoop官网翻译【HDFS upgrade domain】

HDFS 大集群domain升级

2023-04-02 23:01:38 46

原创 HDFS学习笔记【Datanode/BlockManager】

hdfs BlockManager作用，以及组成BPOfferServiceBPServiceActor

2023-04-02 21:49:11 290

原创 拍照构图原理(一)

直男也要拍照呀~

2023-04-02 13:45:23 116

原创 HDFS学习笔记【Datanode/FsDatasetImpl/缓存】

hdfs集中式缓存实现

2023-03-31 23:54:22 232

原创 Ranger学习笔记 【udf权限】

Ranger UDF策略 梳理测试

2023-03-31 00:25:34 922

原创 Mysql学习笔记 【索引】

mysql学习笔记 索引

2023-03-30 09:41:22 240

翻译 Hadoop官网翻译【HDFS磁盘平衡】

hdfs磁盘块平衡

2023-03-30 00:13:58 98

原创 HDFS学习笔记【Datanode/FsDatasetImpl】

HDFS2.X 学习笔记 FsDatasetImpl block块操作

2023-03-28 22:53:08 257

翻译 Hadoop官网翻译【HDFS 内存支持】

Hadoop 内存存储

2023-03-28 20:41:29 54

原创 HDFS学习笔记【Datanode/文件系统数据集】

DN文件系统集,FSVolumeList FsVolumeImpl BlockPoolSplice

2023-03-27 23:22:15 317

原创 Hadoop官网翻译【HDFS Erasure Coding】

Hadoop官网梳理 EC纠删码

2023-03-27 14:26:42 64

原创 HDFS学习笔记【Datanode/结构和存储】

HDFS2.x DataNode学习笔记。

2023-03-27 07:42:41 266

原创 Hadoop官网翻译 【FileSystem/PathCapabilities/FSDataOutputStreamBuilder】

Hadoop官网翻译 PathCapabilities和FSDataOutputStreamBuilder

2023-03-24 23:05:27 49

原创 Ranger学习笔记

Ranger授权梳理

2023-03-24 17:43:26 124

原创 Hadoop官网翻译 【FileSystem/FSDataInputStream】

Hadoop官网翻译 学习笔记 DataInputStream读取数据

2023-03-23 23:53:25 183

原创 Hadoop官网翻译 【FileSystem/OutputStream】

Hadoop官网翻译 OutputStream

2023-03-23 21:39:56 180

原创 Hadoop官网翻译 【FileSystem模型/FileSystem Class】

Hadoop 官网翻译 FileSystem2 FileSystem class

2023-03-23 11:51:52 125 1

原创 Hadoop官网翻译 【FileSystem概览】

Hadoop翻译 FileSystem概览

2023-03-22 10:53:09 47

原创 Hadoop官网翻译 【HDFS 滚动升级】

Hadoop官网翻译 滚动升级

2023-03-20 23:49:26 85

原创 Hadoop官网翻译 【Proxy user】

Hadoop翻译 proxy user模拟用户

2023-03-20 08:14:11 106 1

原创 Hadoop官网翻译 【NFS网关】

Hadoop官网翻译 【NFS网关】

2023-03-19 19:23:13 113

原创 Hadoop官网翻译 【HDFS集中式缓存管理】

官网翻译 HDFS集中式缓存

2023-03-19 05:18:24 155

原创 技术杂谈 【配置dns服务器】

搭建dns服务器用来测试

2023-03-18 23:51:29 147

原创 Hadoop官网翻译 【短路读】

Hdfs短路读翻译

2023-03-18 20:02:26 69 2

原创 技术杂谈 【RPC请求和Restful风格】

RPC和Restful风格

2023-03-18 00:44:14 164

原创 Hadoop官网翻译 【WebHDFS】

Http Rest API支持完整的FileSystem方法。Client和Namenode之间的通信是RPC通信吗？实现了两套逻辑吗？

2023-03-17 22:53:41 126

原创 Hadoop官网翻译【HDFS联邦】

hdfs翻译联邦

2023-03-15 23:45:19 37

原创 Hadoop官网翻译 （HDFS Observer NameNode）

Hadoop翻译 Observer

2023-03-15 22:34:40 185

原创 Hadoop官网翻译【Quorum Journal Manager】

QJM官网翻译

2023-03-15 20:41:45 165

原创 Spark学习笔记 【官网翻译-概览】

Spark官网翻译

2023-03-13 20:46:45 54

原创 Hadoop官网翻译 (MapReduce教程)

MR官网翻译

2023-03-10 00:58:49 95

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除