自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

油纸雨伞的博客

  • 博客(44)
  • 资源 (2)
  • 收藏
  • 关注
排序：
按最后发布时间
按访问量
RSS订阅

原创 Spark学习笔记【shuffle】

Spark Shuffle

2023-05-06 00:04:59 758 1

原创 K8S网络探究

重度参考凤凰架构和Kubernets in Action，目的是了解K8S里面网络如何设计的，以及选用的原则。为了解决容器网络问题:容器和容器容器和宿主机跨物理机的容器通信容器间网络如何通信?主机模式: 使用宿主机的网络，没有隔离。(个人感觉不能和其他的隔离的网络进行通信。容器模式：加入到已有的容器网络overlay模式: calico使用ip on ip进行网络隔离和通信，新能损耗在20%。

2023-04-26 11:23:28 663

原创 HDFS学习笔记 【Namenode/DN管理】

DN管理管理了什么？NN上如何表示DNDN存储和块的关系梳理DatanodeManager存储类。

2023-04-13 06:41:05 412 3

原创 HDFS学习笔记 【Namenode/数据块管理】

Namenode数据块管理

2023-04-10 23:20:26 580 1

原创 HDFS学习笔记【Datanode/数据块扫描器】

hdfs2.x 块扫描

2023-04-07 14:35:22 527

翻译 Hadoop官网翻译【HDFS datanode admin】

hdfs datanode 下线，进入维护模式等

2023-04-07 09:31:36 81

原创 HDFS学习笔记【Datanode/写数据】

hdfs datanode写数据

2023-04-06 14:54:32 525

原创 HDFS学习笔记【Datanode/读数据】

datanode读数据

2023-04-04 11:17:51 249

原创 HDFS学习笔记【Datanode/流式接口】

hdfs datanode 流式接口框架

2023-04-03 14:23:12 195

翻译 Hadoop官网翻译【HDFS upgrade domain】

HDFS 大集群domain升级

2023-04-02 23:01:38 63

原创 HDFS学习笔记【Datanode/BlockManager】

hdfs BlockManager作用，以及组成BPOfferServiceBPServiceActor

2023-04-02 21:49:11 321

原创 拍照构图原理(一)

直男也要拍照呀~

2023-04-02 13:45:23 143

原创 HDFS学习笔记【Datanode/FsDatasetImpl/缓存】

hdfs集中式缓存实现

2023-03-31 23:54:22 269

原创 Ranger学习笔记 【udf权限】

Ranger UDF策略 梳理测试

2023-03-31 00:25:34 1050

原创 Mysql学习笔记 【索引】

mysql学习笔记 索引

2023-03-30 09:41:22 258

翻译 Hadoop官网翻译【HDFS磁盘平衡】

hdfs磁盘块平衡

2023-03-30 00:13:58 124

原创 HDFS学习笔记【Datanode/FsDatasetImpl】

HDFS2.X 学习笔记 FsDatasetImpl block块操作

2023-03-28 22:53:08 286

翻译 Hadoop官网翻译【HDFS 内存支持】

Hadoop 内存存储

2023-03-28 20:41:29 74

原创 HDFS学习笔记【Datanode/文件系统数据集】

DN文件系统集,FSVolumeList FsVolumeImpl BlockPoolSplice

2023-03-27 23:22:15 354

原创 Hadoop官网翻译【HDFS Erasure Coding】

Hadoop官网梳理 EC纠删码

2023-03-27 14:26:42 84

原创 HDFS学习笔记【Datanode/结构和存储】

HDFS2.x DataNode学习笔记。

2023-03-27 07:42:41 290

原创 Hadoop官网翻译 【FileSystem/PathCapabilities/FSDataOutputStreamBuilder】

Hadoop官网翻译 PathCapabilities和FSDataOutputStreamBuilder

2023-03-24 23:05:27 61

原创 Ranger学习笔记

Ranger授权梳理

2023-03-24 17:43:26 144

原创 Hadoop官网翻译 【FileSystem/FSDataInputStream】

Hadoop官网翻译 学习笔记 DataInputStream读取数据

2023-03-23 23:53:25 208

原创 Hadoop官网翻译 【FileSystem/OutputStream】

Hadoop官网翻译 OutputStream

2023-03-23 21:39:56 214

原创 Hadoop官网翻译 【FileSystem模型/FileSystem Class】

Hadoop 官网翻译 FileSystem2 FileSystem class

2023-03-23 11:51:52 149 1

原创 Hadoop官网翻译 【FileSystem概览】

Hadoop翻译 FileSystem概览

2023-03-22 10:53:09 71

原创 Hadoop官网翻译 【HDFS 滚动升级】

Hadoop官网翻译 滚动升级

2023-03-20 23:49:26 106

原创 Hadoop官网翻译 【Proxy user】

Hadoop翻译 proxy user模拟用户

2023-03-20 08:14:11 122 1

原创 Hadoop官网翻译 【NFS网关】

Hadoop官网翻译 【NFS网关】

2023-03-19 19:23:13 130

原创 Hadoop官网翻译 【HDFS集中式缓存管理】

官网翻译 HDFS集中式缓存

2023-03-19 05:18:24 188

原创 技术杂谈 【配置dns服务器】

搭建dns服务器用来测试

2023-03-18 23:51:29 201

原创 Hadoop官网翻译 【短路读】

Hdfs短路读翻译

2023-03-18 20:02:26 95 2

原创 技术杂谈 【RPC请求和Restful风格】

RPC和Restful风格

2023-03-18 00:44:14 184

原创 Hadoop官网翻译 【WebHDFS】

Http Rest API支持完整的FileSystem方法。Client和Namenode之间的通信是RPC通信吗？实现了两套逻辑吗？

2023-03-17 22:53:41 155

原创 Hadoop官网翻译【HDFS联邦】

hdfs翻译联邦

2023-03-15 23:45:19 61

原创 Hadoop官网翻译 （HDFS Observer NameNode）

Hadoop翻译 Observer

2023-03-15 22:34:40 227

原创 Hadoop官网翻译【Quorum Journal Manager】

QJM官网翻译

2023-03-15 20:41:45 186

原创 Spark学习笔记 【官网翻译-概览】

Spark官网翻译

2023-03-13 20:46:45 79

原创 Hadoop官网翻译 (MapReduce教程)

MR官网翻译

2023-03-10 00:58:49 119

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除