statefulset使用hostPath存储卷

最新推荐文章于 2024-04-17 10:31:59 发布
最新推荐文章于 2024-04-17 10:31:59 发布
阅读量1.6k 收藏 2
点赞数
分类专栏： Kubernetes 文章标签： kubernetes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/greatsharp/article/details/124531728
版权

预先创建好三个pv：ss-pv-volume, ss-pv-volume-1, ss-pv-volume-2

创建statefulset，自动绑定pv，同时生成三个pvc

验证statefulset

最低0.47元/天 解锁文章
k8s之使用statefulset部署FastDFs
小人物的博客
07-02 708
FastDFS是一个开源的分布式文件系统，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。 FastDFS服务端有两个角色：跟踪器（tracker）和存储节点（storage）。跟踪器主要做调度工作，在访问上起负载均衡的作用。 Statefulset简介： 应用程序与用户、设备、其他应用程序或外部组件进行通信时，根据其是否需要记录前一次或...
Kubernetes(k8s)存储三、Volumes配置管理(.emptyDir、hostPath,pv、sc+nfs动态分配pv、StatefulSet+mysql)
ninimino的博客
03-08 1074
Volumes配置管理Kubernetes 支持下列类型的卷：1.emptyDir卷2.hostPath 卷hostPath 示例NFS 示例3.PersistentVolume（持久卷，简称PV）NFS持久化存储实战NFS PV 示例：Pod挂载PV:4.StorageClass(动态)NFS Client ProvisionerNFS动态分配PV示例：如何迁移到指定namespace 容器中的文件在磁盘上是临时存放的，这给容器中运行的特殊应用程序带来一些问题。首先，当容器崩溃时，kubelet 将重新启
基于NAS共享NFS的statefulset，volumes绑定为hostpath遇到的权限问题及解决方案。
Explore
11-16 2851
问题背景：不同于常规k8s的statefulset,我们没有创建pv，在statefulset的yaml文件里没有使用volumeClaimTemplates声明PVC的模板,而是直接使用的volumes搭配hostpath的方式，使用的宿主机的存储卷（宿主机的存储卷目录已经挂载到nas 的nfs共享卷）。 statefulset.yaml的volume字段（完整的yaml文件会在文章最末尾贴出来）： apiVersion: apps/v1 kind: StatefulSet ...
Kubernetes-Volumes配置、emptyDir卷、hostPath 卷、持久卷、StatefulSet介绍
qq_46490950的博客
08-02 1367
目录一.Volumes配置管理二.emptyDir卷1.emptyDir卷创建2. 访问三.hostPath 卷1.结合nfs四.PersistentVolume持久卷介绍1.持久卷PV --静态2.持久卷pv-动态介绍部署五.StatefulSet1.设置默认sc2.StatefulSet实现pod拓扑 一.Volumes配置管理 容器中的文件在磁盘上是临时存放的，这给容器中运行的特殊应用程序带来一些问题。首先，当容器崩溃时，kubelet 将重新启动容器，容器中的文件将会丢失,因为容器会以干净的状态重建
Kubernetes 9 （volumes配置、emptyDir卷、hostPath 卷、持久卷、StatefulSet控制器）
qq_38664479的博客
09-29 849
目录一、Volumes简介二、emptyDir卷三、hostPath卷1.主机内目录挂载到pod中2.主机内nfs挂载到pod中四、PersistentVolume持久卷1.静态PV2.动态PV 一、Volumes简介 1、容器中的文件在磁盘上是临时存放的，这给容器中运行的特殊应用程序带来一些问题。首先，当容器崩溃时，kubelet 将重新启动容器，容器中的文件将会丢失，因为容器会以干净的状态重建。其次，当在一个 Pod 中同时运行多个容器时，常常需要在这些容器之间共享文件。 Kubernetes 抽象出
kubernetes之StatefulSet
菲宇运维
09-09 2067
StatefulSet k8s的statefulset相信很多人都用过，在1.5之后才引入的，1.5之前用的是petset,关于petset在之前的老版本的paas开发中用的就是petset，很多不足的地方，等会儿会说到这点。petset也好，statefulset也好，都是为啦解决容器的有状态服务。下面就谈谈在用statefulset的时候的一些小疑惑和收获。 浅谈statefulset v...
Kubernetes中StatefulSet与存储卷的最佳实践
介绍StatefulSet和存储卷 ### 1.1 StatefulSet的概述 StatefulSet是Kubernetes提供的一种控制器对象，用于管理有状态应用程序的部署。与普通的Deployment控制器不同，StatefulSet为每个Pod分配一个稳定的网络...
Kubernetes组件_Pod控制器_StatefulSet处理拓扑状态和存储状态
毛毛的专栏
07-09 1078
Statefulset处理拓扑状态和存储状态
Kubernetes - 实战：存储之Volumes配置管理emptyDir卷、hostPath卷、PersistentVolume持久卷、StatefulSet控制器
qq_33240556的博客
04-17 496
以上实战示例展示了如何在Kubernetes中配置和使用emptyDir、hostPath、PersistentVolume/PersistentVolumeClaim以及如何在StatefulSet中使用持久卷。StatefulSet特别适合需要持久化标识符、有序部署以及稳定的网络标识符（如固定不变的域名）的应用场景。在Kubernetes中，存储卷（Volumes）是用于持久化或临时存储Pod数据的关键组件。emptyDir卷在Pod创建时自动创建，在Pod销毁时自动清除。
记录 - k8s入门4 - StatefulSet basic (1.16.0)
big_cheng的博客
11-17 702
文章目录环境hostPath 存储创建StatefulSetsts里的pod伸缩sts扩容缩容更新stsRollingUpdate策略分段更新 (Staging an Update)金丝雀发布 (Rolling Out a Canary)分段发布 (Phased Roll Outs)OnDelete策略删除stsNon-Cascading DeleteCascading DeletePod Man...
hualinux 进阶 1.15：StatefulSet有状态应用（一）
hualinux（阿华的linux）
07-20 440
目录 一、StatefulSets介绍 二、StatefulSet 状态分类 2.1 拓扑状态 2.2 存储状态 三、建立一个简单的拓扑状态的StatefulSet 3.1 编写statefulSet的YAML文件 3.2 pod对应的域名 3.3 访问测试 3.3.1 安装centos pod 3.3.2 测试 四、稳定的存储 4.1 pv和pvc的关系 4.1.1 pv生命周期 4.1.2 pv回收策略 4.1.3 pv的声明类型 4.2storageClassName.
K8S持久化存储-hostPath 卷的存储
qq_759035366的博客
04-09 1352
【代码】K8S持久化存储-hostPath 卷的存储。
k8s之存储、SC、STS、DS篇（一些常见的存储方案）
weixin_51697758的博客
08-13 4803
DaemonSet控制器能够确保k8s集群所有的节点都运行一个相同的pod副本，当向k8s集群中增加node节点时，这个node节点也会自动创建一个pod副本，当node节点从集群移除，这些pod也会自动删除；删除Daemonset也会删除它们创建的pod。......
k8s配置StatefulSet解读
u013078871的博客
09-12 1286
k8s配置StatefulSet解读
在本地集群创建StatefulSet有状态的应用
longtails的博客
05-16 960
Stateful Set 在k8s上部署有状态的应用是通过StatefulSets实现的。这里我们尝试部署官网的Stateful Set demo，为kfk/zk的部署做前期实验。 像Deployment一样，StatefulSet也是基于容器特定的标识来管理Pod的，不一样的是StatefulSet会为每个pod保持一个标识。StatefulSet下创建的pod具有相同的配置，但每个pod都有一...
k8s之StatefulSet详解
热门推荐
最美dee时光的博客
05-11 6万+
本篇是基于k8s-v1.15.0版本。 1、介绍 RC、Deployment、DaemonSet都是面向无状态的服务，它们所管理的Pod的IP、名字，启停顺序等都是随机的，而StatefulSet是什么？顾名思义，有状态的集合，管理所有有状态的服务，比如MySQL、MongoDB集群等。 StatefulSet本质上是Deployment的一种变体，在v1.9版本中已成为GA版本，它为了解决有状态服务的问题，它所管理的Pod拥有固定的Pod名称，启停顺序，在StatefulSet中，Pod名字称为网络标识
容器编排技术 -- Kubernetes StatefulSet基本使用
YunWisdom
08-30 740
容器编排技术 -- Kubernetes StatefulSet基本使用 1Objectives 2Before you begin 2.1顺序创建 Pod 3Pods in a StatefulSet 4StatefulSet 中的 Pod 4.1检查 Pod 的顺序索引 4.2使用稳定的网络身份标识 4.3写入稳定的存储 5扩容/缩容...
kubernetes入门之--StatefulSet
qq_42864299的博客
04-27 877
在开始写之前我们先来简单了解一下kubernetes的 StatefulSets，大致概括为，有状态的集合，管理所有有状态的服务，以下是官网上StatefulSets的几个特性 1.稳定，独特的网络标识符。 2.稳定，持久的存储。 3.有序，优雅的部署和扩展。 4.有序的自动滚动更新。 常见的资源 pod RelicationController StatefulSets 特点 可扩容 有序...
我是要关闭volumeClaimTemplate 使用宿主机的hostpath
最新发布
04-02
<think>好的，现在用户想要关闭volumeClaimTemplate，转而使用宿主机的HostPath来持久化数据。之前已经指导过如何通过Helm安装ES并配置HostPath，现在需要调整配置来关闭PVC。 首先，我需要确认用户使用的是哪个Helm Chart。根据之前的对话，用户可能使用的是Bitnami的Elasticsearch Chart。Bitnami的Chart默认会使用PersistentVolumeClaims（PVC）来管理存储，所以用户需要覆盖相关配置，禁用PVC并启用HostPath。 接下来，需要找出Chart中控制持久化的配置项。通常，这类Chart会有persistence.enabled参数，设为false可以禁用PVC。但用户可能还需要保留数据持久化，因此需要同时指定使用hostPath。可能需要检查Bitnami Elasticsearch Chart的values.yaml文件，确认相关参数。 然后，用户提到要关闭volumeClaimTemplate，这可能涉及到StatefulSet的配置。在Kubernetes中，StatefulSet通常使用volumeClaimTemplates来动态创建PVC。关闭这个功能意味着需要直接指定volumes而不是依赖PVC。因此，在Helm values中，可能需要设置persistence.enabled为false，并通过extraVolumes和extraVolumeMounts来添加HostPath卷。 另外，权限问题也需要考虑。HostPath需要正确的目录权限，否则Elasticsearch容器可能无法写入。可能需要设置securityContext，或者确保宿主机目录的权限正确。在之前的回答中，已经提到过设置volumePermissions.enabled为true，自动修复权限，这可能仍然适用。 现在，用户可能需要一个具体的custom-values.yaml示例，展示如何禁用PVC并启用HostPath。需要确保persistence.enabled设为false，同时配置extraVolumes和extraVolumeMounts指向HostPath路径。此外，可能需要调整节点配置，比如单节点模式，以简化测试环境。 还需要考虑其他相关配置，例如sysctlImage.enabled，用于修改内核参数vm.max_map_count，这在Elasticsearch中是必需的。同时，测试环境下可能需要禁用资源限制，确保ES能够正常启动。 最后，验证步骤也很重要，确保Pod正确挂载了HostPath目录，数据能够持久化。用户可能需要检查Pod的事件日志，确认卷挂载成功，没有权限问题，并通过创建索引、删除Pod重新部署等方式测试数据是否保留。 总结步骤：创建宿主机目录，配置values.yaml禁用PVC，添加HostPath卷，处理权限和内核参数，安装并验证。</think>### $\textsf{Helm 关闭 PVC 强制使用 HostPath 配置方案}$ #### $\textcolor{orange}{\textbf{核心原理}}$ 通过覆盖 Helm Chart 默认配置，关闭 `volumeClaimTemplate` 动态存储声明，直接绑定宿主机目录。需重点修改： 1. **禁用 PersistentVolumeClaim (PVC)** 2. **显式声明 HostPath 卷挂载** 3. **调整 StatefulSet 存储配置** --- ### $\textcolor{green}{\textsf{分步配置流程}}$ #### $\textcolor{blue}{\textbf{步骤1：创建宿主机目录}}$ ```bash sudo mkdir -p /data/elasticsearch/{data,logs} sudo chmod 777 -R /data/elasticsearch # 测试环境简化权限 ``` #### $\textcolor{blue}{\textbf{步骤2：自定义 values.yaml 文件}}$（关键配置） ```yaml # custom-hostpath.yaml global: storageClass: null # 显式禁用存储类 persistence: enabled: false # 关闭 PVC 自动创建 # 手动定义 HostPath 卷 extraVolumes: - name: elastic-data hostPath: path: /data/elasticsearch/data type: DirectoryOrCreate - name: elastic-logs hostPath: path: /data/elasticsearch/logs type: DirectoryOrCreate # 挂载到容器路径 extraVolumeMounts: - name: elastic-data mountPath: /bitnami/elasticsearch/data - name: elastic-logs mountPath: /opt/bitnami/elasticsearch/logs # 单节点简化模式（测试推荐） coordinating: replicas: 1 master: replicas: 1 data: replicas: 1 ``` #### $\textcolor{blue}{\textbf{步骤3：安装/升级 Elasticsearch}}$ ```bash helm upgrade --install elasticsearch bitnami/elasticsearch \ -f custom-hostpath.yaml \ --set sysctlImage.enabled=true \ --set resources.requests.memory="512Mi" \ --set resources.requests.cpu="200m" ``` --- ### $\textcolor{red}{\textsf{关键配置解析}}$（表格） | 配置项 | 作用 | |---------------------------|----------------------------------------------------------------------| | `persistence.enabled=false` | 禁用 PVC 存储声明 | | `extraVolumes` | 定义 HostPath 物理卷 | | `extraVolumeMounts` | 绑定容器内 Elasticsearch 数据/日志路径 | | `sysctlImage.enabled=true`| 自动修复 `vm.max_map_count` 内核参数 | --- ### $\textcolor{purple}{\textsf{验证方法}}$ 1. **检查实际挂载情况** ```bash kubectl exec elasticsearch-data-0 -- ls /bitnami/elasticsearch/data # 应显示 nodes/ 目录 ``` 2. **数据持久化测试** ```bash # 创建测试索引 kubectl exec -it elasticsearch-master-0 -- curl -X PUT "localhost:9200/persistent-test" # 删除 Pod 后验证数据保留 kubectl delete pod elasticsearch-data-0 kubectl exec elasticsearch-data-0 -- curl "localhost:9200/_cat/indices" ``` --- ### $\textcolor{orange}{\textsf{深度避坑指南}}$ 1. **目录权限冲突** ```bash # 查看 Pod 事件中的权限错误 kubectl describe pod elasticsearch-data-0 | grep -A 10 Events # 解决方案：预先设置目录属主 sudo chown -R 1001:1001 /data/elasticsearch # 1001 是 bitnami 容器默认 UID ``` 2. **多节点数据混乱** $\rightarrow$ 测试环境强制单节点模式 ```yaml data: replicas: 1 updateStrategy: "OnDelete" ``` 3. **内核参数未生效** $\rightarrow$ 手动设置宿主机参数： ```bash echo "vm.max_map_count=262144" | sudo tee -a /etc/sysctl.conf sudo sysctl -p ``` --- ### $\textcolor{blue}{\textsf{生产环境对比}}$ | 特性 | 测试环境方案 | 生产环境推荐方案 | |---------------------|---------------------------|---------------------------| | 存储类型 | HostPath | 网络存储 (Ceph/NFS) | | 数据可靠性 | 依赖单机磁盘 | 多副本+自动修复 | | 扩展性 | 手动迁移数据 | 动态扩容 | | 权限控制 | 777 简单权限 | RBAC + fsGroup 精确控制 | --- ### $\textcolor{green}{\textsf{扩展：动态 HostPath 清理}}$ ```bash # 保留数据卸载 helm uninstall elasticsearch --keep-history # 彻底清除（包括主机数据） sudo rm -rf /data/elasticsearch/* ```
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值