2019年05月_张忠琳

原创【kubernetes/k8s概念】kube-apiserver启动参数

kubernetes 1.12.1版本DESCThe Kubernetes API server validates and configures data for the api objects which include pods, services, replicationcontrollers, and others. The API Server services REST o...

2019-05-30 15:07:54 12861 1

原创【kubernetes/k8s源码分析】 k8s secret storage 源码分析

Secret是用来保存小片敏感数据的k8s资源，例如密码，token，或者秘钥。这类数据当然也可以存放在Pod或者镜像中，但是放在Secret中是为了更方便的控制如何使用数据，并减少暴露的风险。用户可以创建自己的secret，系统也会有自己的secret。 Pod需要先引用才能使用某个secret，Pod有2种方式来使用secret：作为volume的一个域...

2019-05-29 20:17:26 3597

原创【kubernetes/k8s源码分析】 k8s hostpath storage 源码分析

hostPath允许挂载Node上的文件系统到Pod里面去。如果Pod有需要使用Node上的东西，可以使用hostPathhostPath的用途如下：运行需要访问 Docker 内部的容器；使用/var/lib/docker的hostPath 在容器中运行 cAdvisor；使用/dev/cgroups的hostPath为hostPath卷指...

2019-05-29 20:03:57 4617 1

原创【kubernetes/k8s源码分析】 k8s emptydir storage 源码分析

EmptyDir 类型：同一个pod内的容器都能读写 EmptyDir 中文件。一旦pod 离开了宿主机，EmptyDir 中的数据就会被永久删除。所以目前 EmptyDir 类型的 volume主要用作临时空间。缺省情况下，EmptyDir 是使用主机磁盘进行存储的，需要使用 tmpfs 作为 emptyDir 的可用存储资源也是可以的，只需要在创建 empt...

2019-05-29 09:08:59 3188

原创【kubernetes/k8s源码分析】 k8s local storage 源码分析

Local Storage 就是 Kubernetes 集群中每个节点的本地存储，在 Kubernetes 1.7 中 kubelet 可以支持对 kube-reserved 和system-reserved 指定本地存储资源。Local 存储是为了替换hostPathvolume kubernetes v1.14.0 正式发布，新特性就是本地持久化管理( Local Sto...

2019-05-28 20:18:12 3048

原创【kubernetes/k8s源码分析】 csi driver nfs 源码分析

https://github.com/kubernetes-csi/csi-driver-nfs nfs csi 的实现，其实这里不支持动态storageclass，只支持 mount 操作，看看怎么实现的 endpoint：csi socket nodeid： node id 也很好理解Usage: NFS [flags]Flags: ...

2019-05-28 20:01:38 3732 1

原创【kubernetes/k8s源码分析】 external nfs storage 源码分析

https://github.com/kubernetes-incubator/external-storage/tree/master/nfs-clientstorageclass.yamlapiVersion: storage.k8s.io/v1kind: StorageClassmetadata: name: managed-nfs-storageprovisio...

2019-05-28 14:05:08 2404 1

原创【kubernetes/k8s概念】 nfs 概念与原理

1. NFS 原理 NFS是Network File System的简写，即网络文件系统。NFS基于RPC(Remote Procedure Call)远程过程调用实现。由操作系统的内核，将 NFS 文件系统的调用请求通过 TCP/IP 发送至服务端的 NFS 服务。NFS服务器执行相关的操作，并将操作结果返回给客户端rpc.nfsd：主要的NFS进程，管理客户端是否可登录...

2019-05-28 12:02:06 2866

原创【kubernetes/k8s概念】 rook design分析

1.Ceph Cluster CRDapiVersion: ceph.rook.io/v1kind: CephClustermetadata: name: rook-ceph namespace: rook-cephspec: cephVersion: # see the "Cluster Settings" section below for more deta...

2019-05-22 09:27:08 2220

原创【kubernetes/k8s概念】 pv pvc storageclass介绍

问题的引入：Pod 通常是由应用的开发人员维护，而 Volume 则通常是由存储系统的管理员维护。这样就带来一个管理上的问题：应用开发人员和系统管理员的职责耦合在一起了。如果系统规模较小或者对于开发环境这样的情况还可以接受。但当集群规模变大，特别是对于生成环境一. PersistentVolume PersistentVolume (PV) 是外部存储系统中的一块存储空...

2019-05-16 09:01:12 8301 3

原创【kubernetes/k8s源码分析】 k8s csi plugin attach mount源码分析

接着kubelet pod 挂载volume源码分析文章https://blog.csdn.net/zhonglinzhang/article/details/89923875 volumeAttacher, newAttacherErr := attachableVolumePlugin.NewAttacher()，如果使用CSI插件则调用如下：func (p *csiP...

2019-05-15 14:42:52 2702 1

原创【kubernetes/k8s源码分析】 k8s csi plugin watcher源码分析

CSI（Container Storage Interface）规范: https://github.com/container-storage-interface/spec 主要工作是监听plugins目录，然后根据事件操作，Create事件则注册插件，Remove事件则删除插件 +----------------...

2019-05-15 09:02:06 2728 1

原创【存储ceph】 ceph概念与原理

CEPH概念 Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统，可以将Ceph分为三大块，分别是对象存储、块设备存储和文件系统服务。由于Ceph的良好设计，采用了CRUSH算法、HASH环等方法，使得它不存在传统的单点故障的问题，且随着规模的扩大性能并不会受到影响。CEPH架构经典的Ceph模块架构图...

2019-05-14 19:47:44 2074

原创【kubernetes/k8s概念】helm安装部署ceph

1. Helm简介为 Kubernetes 的包管理工具，可以方便地发现、共享和使用为Kubernetes构建的应用。 Helm 采用客户端/服务器架构，如下组件：Helm CLI：命令行客户端工具。主要用于 Kubernetes 应用程序 Chart 的创建、打包、发布以及创建和管理本地和远程的 Chart 仓库。 Tiller：是 Helm 的服务端，部署在 K...

2019-05-13 15:01:44 6633

原创【kubernetes/k8s源码分析】 ceph csi cephfs plugin 源码分析

Ceph FS 是一个支持POSIX接口的文件系统，它使用 Ceph 存储集群来存储数据。文件系统对于客户端来说可以方便的挂载到本地使用。 Ceph FS 使用cephfuse模块扩展到用户空间(FUSE)中的文件系统。允许使用libcephfs库与RADOS集群进行直接的应用程序交互。Cephfs使用方法Cephfs kernel modul...

2019-05-09 17:01:52 3571

原创【kubernetes/k8s源码分析】 ceph csi rbd plugin 源码分析

被external-provisioner发送CreateVolumeRequest GRPC请求执行rbd命令，创建pv 分为三阶段就是 Provision Attach MountCreateVolume +------------+ DeleteVolume+------------->| CREATED +--------------+| ...

2019-05-09 16:29:14 2859

原创【kubernetes/k8s源码分析】 kubernetes csi node driver registrar 源码分析

Git Repository:https://github.com/kubernetes-csi/node-driver-registrarStatus:GA/StableLatest stable release Branch Min CSI Version Max CSI Version Container Image Min k8s Version...

2019-05-09 14:49:54 3503 1

原创【kubernetes/k8s源码分析】flexvolume 自定义存储插件

从1.8版开始，Kubernetes Storage SIG停止接受树内卷插件，建议所有存储提供商树外插件。Flexvolume是Kubernetes 1.8版本以后的GA特性Flexvolume介绍 –enable-controller-attach-detach启用Kubelet选项，从v1.8开始支持动态检测驱动程序的能力。Driver inv...

2019-05-08 16:55:13 2833 1

原创【kubernetes/k8s源码分析】kubelet pod 挂载volume源码分析

1. NewVolumeManager 初始化volumeManager volumePluginMgr 使用volume 插件实例化 volumeManager，实例化desiredStateOfWorldPopulator 这个reconciler是主要调整，attach detach mount unmount操作的，这个主要讲解...

2019-05-07 16:33:39 4028

原创【kubernetes/k8s源码分析】 kube-controller-manager之pv pvc controller源码分析

PersistentVolumeClaim（PVC）是用户存储的请求。它类似于pod。Pod消耗节点资源，PVC消耗存储资源 StorageClass 提供了一种描述他们提供的存储的“类”的方法。不同的类可能映射到服务质量级别，或备份策略，或者由群集管理员确定的任意策略。pv.kubernetes.io/bind-completed:：yes ...

2019-05-07 10:58:15 4646

原创【kubernetes/k8s源码分析】 rook operator flexvolume attach 源码分析

flexvolume GRPC调用执行 rookflex mount操作/usr/local/bin/rookflex --helpRook Flex volume pluginUsage: rookflex [command]Available Commands: help Help about any command init I...

2019-05-06 19:41:10 1881

原创【kubernetes/k8s源码分析】 rook operator flexvolume provision 源码分析

初始化 provisioner，分别为 ceph.rook.io 和 rook.io controller.NewProvisionController中provisioner实现为RookVolumeProvisioner' 定义 rook/pkg/operator/ceph/provisioner/provisioner.go// Run volume pro...

2019-05-06 15:15:41 1705

原创【kubernetes/k8s源码分析】 rook operator cluster controller源码分析之四

这篇分析pool CRD，object store CRD，object store user CRD，file system CRD， nfs granesha CRD等watcher包括mon，osd健康检查，ceph状态检查Replicated: 数据副副本数apiVersion: ceph.rook.io/v1kind: CephBlockPoolm...

2019-05-06 11:12:44 1719

原创【kubernetes/k8s源码分析】 rook operator cluster controller源码分析之三

這篇文章分析osd啓動流程存储落地操作的节点叫做OSD（Object Storage Device），基于它工作的RADOS、PG等模块启动命令： ceph-osd --foreground --id 1 --conf /var/lib/rook/osd1/rook-ceph.config --osd-data /var/lib/rook/osd1 --ke...

2019-05-06 08:41:18 2325

原创【kubernetes/k8s源码分析】 rook operator cluster controller源码分析之二

接着上篇，這篇分析mgr的啓動mgr工作原理工作的模式是事件驱动型的，意思就是等待事件，事件来了则处理事件返回结果，又继续等待负责跟踪运行时间指标和Ceph群集的当前状态，包括存储利用率，当前性能指标和系统负载。 Ceph Manager守护程序还托管基于python的插件来管理和公开Ceph集群信息，包括基于Web的仪表板和REST API。...

2019-05-05 18:34:13 1686

原创【kubernetes/k8s源码分析】 rook operator cluster controller源码分析之一

Mon作用是监控、管理和协调整个分布式系统环境中其它各个OSD/PG、Client、MDS角色的工作，保证整个分布环境中的数据一致性 MON采用主备模式（leader/follower），即使系统中有多个MON角色，实际工作的也只有一个MON，其它MON都处于standby状态当Ceph失去了Leader MON后，其它MON会基于PaxOS算...

2019-05-05 14:49:44 2301

原创【kubernetes/k8s源码分析】 rook operator discover源码分析

启动命令 rook discover --discover-interval 60m启动默认参数 --discover-interval=1h0m0s, --help=false, --log-flush-frequency=5s, --log-level=INFO定期节点发现新设备，并更新至rook-ceph下的configmap中，命名为local-devic...

2019-05-05 11:54:21 1889

原创【kubernetes/k8s源码分析】 rook operator agent源码分析

启动命令 rook ceph agent启动默认参数 --help=false, --log-flush-frequency=5s, --log-level=INFO 挂载路经：/usr/libexec/kubernetes/kubelet-plugins/volume/exec每个 k8s node 中都启动rook agent，接受 rook oper...

2019-05-05 11:31:32 1805

原创【kubernetes/k8s源码分析】 rook operator启动源码分析

https://github.com/rook/rook operator：作用启动监控存储集群，包括mon，osd，mgr等服务，可以支持 block 块存储，file system 文件存储，object 对象存储 (S3/Swift)。启动包括ceph agent 与 discover服务，agent 包含Flexvolume plugin，包括attaching n...

2019-05-05 10:19:30 2551 1

原创【kubernetes/k8s概念】rook

https://github.com/rook/rook 云原生计算基金会(CNCF)的孵化级项目，是Kubernetes的开源云本地存储协调器，为各种存储解决方案提供平台，框架和支持，以便与云原生环境本地集成 Ceph is a highly scalable distributed storage solution forblock storage,obj...

2019-05-05 10:12:13 3444

zhonglinzhang