k8s挂载目录,Kubernetes volumeMount文件夹和文件权限？

最新推荐文章于 2024-08-06 16:00:02 发布
最新推荐文章于 2024-08-06 16:00:02 发布
阅读量4.1k 收藏
点赞数
文章标签： k8s挂载目录
在尝试将配置文件从主机路径挂载到Kubernetes容器时，作者遇到了问题。该操作在Minikube和VirtualBox共享文件夹中成功，但在Linux上（特别是AWS EKS）失败。问题在于文件需要存在于每个EKS节点实例上。解决方案是使用initContainer，通过在每个EC2实例上下载配置文件来解决文件权限和位置的问题。
摘要由CSDN通过智能技术生成

Trying to mount config files from a hostPath to a kubernetes container. This works using minikube and VirtualBox shared folder, but I am unable to make this work on Linux.

I making use of AWS EKS and the following architecture https://aws.amazon.com/quickstart/architecture/amazon-eks/. I think my problem is that the files need to live on each of the EKS Node instances.

Here is the architecture diagram:

37ae4b47b1e8dcd5a3a1f0ef0cb4de7f.png

Below is the Deployment file.

apiVersion: apps/v1

kind: Deployment

metadata:

name: openhim-core-deployment

spec:

replicas: 1

selector:

matchLabels:

component: openhim-core

template:

metadata:

labels:

component: o

最低0.47元/天 解锁文章
了不起频道
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
搭建NFS服务实现两台虚拟机之间共享
weixin_30644369的博客
09-13 1248
NFS网络文件系统，实现Linux与Linux之间的简化文件共享服务 yum intall -y nfs-untils rpcbind 1.创建目录，将光盘镜像挂载到新建目录上 mkdir -p /media/cdrom mount -o loop /dev/cdrom /media/cdrom 2.配置yum源，安装nfs服务 cd /etc/yum.repos....
[经验交流] k8s mount 文件到容器目录
weixin_33701617的博客
04-25 2718
docker 的 volume 可以 mount 单个文件（比如单个配置文件）到容器目录、同时保留原目录的内容。放到 k8s 中，结果却变成了这样：k8s 的 volume 把文件mount 到容器目录后，该目录下的其它文件却消失了（如果 mount 到 /etc 下，只有 hostname，resolv.conf, passwd 等文件被保留）。 这个链接给出了解决方法： https:...
volumes 和 volumeMounts的使用
最新发布
qingcyb的博客
08-06 239
这些卷可以是 Pod 内所有容器都可访问的目录，源可以是本地的节点的文件系统，或是像 ConfigMap、Secret、PersistentVolumeClaim 或者其他 Kubernetes 支持的存储类型之一。这部分定义了该 Pod 可以使用哪些卷，但并没有指明具体的容器如何使用。volumeMounts 是容器层面的配置，决定使用 Pod 层面定义的哪些卷，以及如何使用这些卷（即挂载到容器的哪个目录，挂载方式是只读还是可写）volumes 是 Pod 层面的配置，定义了 Pod 可以使用的数据卷。
Linux目录的基本操作增加、删除、查看、修改、拷贝 《Linux学习》
weixin_41971886的博客
09-21 362
Linux学习之前疑问：以后什么样的人使用linux系统？ 高级开发人员：部署项目代码、日常开发学习（工作一年以后） 架构师：搭建系统架构，保证高性能代码运行环境（非常精通linux） 运维人员：做一些日常维护，比如清理垃圾临时文件等。如果系统崩溃内存溢出等等重启操作。 Linux目录介绍 上述Linux目录结构中，请大家关注： root目录：当前登录用户的主目录，用~表示 home目录：普通用户所在的目录 usr（user share resources）目录：用户共享目录，只.
k8s 九之Volumes配置管理
L*YUE的博客
10-05 1011
Volumes简介 emptyDir卷 emptyDir卷介绍 emptyDir卷示例 hostPath卷 hostPath卷介绍 hostPath卷示例 NFS卷 NFS卷介绍 NFS卷示例
k8s-存储（volumes）
栋院
03-14 5597
使用存储卷的步骤： 1 定义pod的volume,这个volume要指明关联到那个存储。 2 容器中要使用的volume mounts 挂载存储。 临时存储 使用临时存储，在pod生命周期结束后，数据就会消失。 kubectl explain pod.spec.volumes emptyDir 可以通过查看官方样例。 样例： apiVersion: v1 kind: Pod metadata: name: test-tmpdir spec: containers: - n
k8s挂载目录_kubernetes多节点的pod挂载同一个cephfs目录
weixin_39902107的博客
12-21 1973
一、安装cephfs方法一：直接进入deploy目录，执行：ceph-deploy --overwrite-conf mds create ceph01:mds-daemon-1上面的ceph01是机器的hostname方法二：1、在需要安装的目标机器上创建mds目录mkdir -p /var/lib/ceph/mds/ceph-02、生成mds的keyring，并将其写入/var/lib/cep...
k8s挂载目录_k8s 挂载卷介绍（四）
weixin_39648469的博客
12-21 1335
apiVersion: v1kind: Podmetadata:name: gitrepo-volume-podspec:containers:- image: nginx: alpinename: web-nginxvolumeMounts:- name: htmlmountPath: /usr/share/nginx/htmlreadOnly: trueports:- contai...
“云云“众生K8S——hostPath类型的卷挂载
IT小小鸟
09-15 4448
前言 容器中的磁盘文件随着容器的生而生，随着容器的死而灭，这给运行在容器中的重要应用来说存在一些问题： 当容器崩溃时，kubelet会以初始状态重启容器，会导致容器中的重要文件不复存在 当在Pod中运行多个容器时，我们往往需要这些容器共享一些文件 于是，K8S便创造了卷——Volumes 卷类型之hostPath hostPath类型的卷可以把宿主机节点上的文件或文件夹挂载到pod中 先来看看hostPath类型的卷如何配置： apiVersion: v1 kind: Pod metadata:
如何在k8s(kubernetes)中部署postgresql的高可用stolon
weixin_45391210的博客
10-21 4434
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结 前言 该文章讲述了如果在k8s中部署stolon。各大名站内外收集资料并经过多次试验后输出本文章， 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。 二、使用步骤 1.引入库 代码如下（示例）： import numpy as np import p
解决 kubernetes 挂载目录权限的问题。
热门推荐
骑着蜗牛向前跑的博客
08-19 1万+
解决 kubernetes 挂载目录权限的问题
k8s挂configmap的时候,权限要注意
日常随手记
02-24 4929
8进制的777是十进制的511 要在yaml里写511 8进制的644在十进制是420
k8s中pod目录访问权限不足
kylezhou1992的博客
06-24 8126
分析pod面权限目录挂载权限的问题
linux添加硬盘,光驱及yum源安装
Maynor的博客
09-24 5545
超全 Linux 硬盘操作总结0.linux 服务器添加硬盘并进行分区1.光驱的挂载2、软件的相关操作 0.linux 服务器添加硬盘并进行分区 1、linux 服务器添加硬盘并进行分区，实现自动挂载 1、添加硬盘：在虚拟机中添加硬盘（忽略），添加后重启服务器，发现新硬盘 2、硬盘分区：查看硬盘 fdisk –l Fdisk /dev/sdb n p 分区一的开始 1 分区一的结尾 自定义1 分区二的开始 自定义1+1 分区二的结尾 自定义2 w 3、磁盘格式化
k8s使用nfs挂载存储卷
wangmiaoyan的博客
10-31 4185
1、先安装相关的包，所有机器都要安装，包括vol的主机，以及要使用nfs的机器 yum -y install nfs-utils（主包提供文件系统） yum -y install rpcbind（提供rpc协议） 2、编辑 /etc/exports 3、创建相关的文件目录 mkdir -p /data/redis/pv{1…6} 4、修改文件目录权限 chmod 777 /data/redis/...
kubernetes_volume
非晓为骁的博客
12-25 228
Kubernetes Volume
k8s挂载映射操作详解
W1124824402的博客
08-22 3944
在 k8s 中，有几种特殊的 Volume，它们的意义不是为了存放容器里的数据，也不是用来进行容器和宿主机之间的数据交换。"而是为容器提供预先定义好的数据。从容器的角度来看，这些 Volume 里的信息仿佛是被 k8s "投射"（Project）进入容器当中的。k8s 支持的 Projected Volume 一共有四种：SecretConfigMapServiceAccountToken 不常用没有写。
kubernetes volumeMounts 的目录容器内无法写文件
baobaoxiannv的博客
10-28 1096
kubernetes volumeMounts 的目录容器内无法写文件
请使用java编写程序连接k8s启动模型评估任务，要求如下： 1，用户选择模型和数据集 2，从miniIO下载模型，从pachyderm下载数据集 3，评估结果输出到miniIO中
04-28
以下是一个简单的Java代码示例，可以连接到Kubernetes集群，启动模型评估任务，并将结果输出到MinIO中： ``` import io.minio.MinioClient; import io.minio.errors.*; import io.minio.messages.Item; import io.swagger.client.ApiClient; import io.swagger.client.ApiException; import io.swagger.client.Configuration; import io.swagger.client.api.DefaultApi; import io.swagger.client.model.V1ObjectMeta; import io.swagger.client.model.V1Pod; import io.swagger.client.model.V1PodSpec; import io.swagger.client.model.V1PodTemplateSpec; import io.swagger.client.model.V1Container; import io.swagger.client.model.V1ContainerPort; import io.swagger.client.model.V1EnvVar; import io.swagger.client.model.V1EnvVarSource; import io.swagger.client.model.V1SecretKeySelector; import io.swagger.client.model.V1Volume; import io.swagger.client.model.V1VolumeMount; import java.io.IOException; import java.io.InputStream; import java.security.InvalidKeyException; import java.security.NoSuchAlgorithmException; import java.util.ArrayList; import java.util.List; import java.util.Properties; import java.util.concurrent.TimeUnit; import okhttp3.OkHttpClient; import okhttp3.logging.HttpLoggingInterceptor; public class K8sEvaluationTask { private static final String K8S_NAMESPACE = "default"; private static final String K8S_API_URL = "https://kubernetes.default.svc"; private static final String MINIO_ENDPOINT = "http://minio-service.default.svc.cluster.local:9000"; private static final String MINIO_ACCESS_KEY = "accesskey"; private static final String MINIO_SECRET_KEY = "secretkey"; private static final String MINIO_BUCKET_NAME = "evaluation-results"; public static void main(String[] args) throws IOException, InvalidKeyException, NoSuchAlgorithmException, InvalidResponseException, ErrorResponseException, XmlParserException, InternalException { // 用户选择模型和数据集 String modelPath = "/models/my-model.pb"; String datasetPath = "/datasets/my-dataset.csv"; // 从MiniIO下载模型和验证集 MinioClient minioClient = new MinioClient(MINIO_ENDPOINT, MINIO_ACCESS_KEY, MINIO_SECRET_KEY); InputStream modelStream = minioClient.getObject("models", modelPath); InputStream datasetStream = minioClient.getObject("datasets", datasetPath); // 从Pachyderm下载数据集 Properties properties = new Properties(); InputStream inputStream = K8sEvaluationTask.class.getResourceAsStream("/pachyderm.properties"); properties.load(inputStream); String pachdHost = properties.getProperty("pachd.host"); String pachdPort = properties.getProperty("pachd.port"); String pachToken = properties.getProperty("pachd.token"); String pachRepo = "my-repo"; String pachBranch = "master"; String pachPath = "/my-dataset.csv"; ApiClient pachydermClient = Configuration.getDefaultApiClient(); pachydermClient.addDefaultHeader("Authorization", "Bearer " + pachToken); DefaultApi defaultApi = new DefaultApi(pachydermClient); InputStream pachydermStream = defaultApi.getFile(pachRepo, pachBranch, pachPath); // 启动Kubernetes Pod ApiClient apiClient = Configuration.getDefaultApiClient(); apiClient.setBasePath(K8S_API_URL); HttpLoggingInterceptor loggingInterceptor = new HttpLoggingInterceptor(); loggingInterceptor.setLevel(HttpLoggingInterceptor.Level.BODY); OkHttpClient okHttpClient = apiClient.getHttpClient().newBuilder() .addInterceptor(loggingInterceptor) .connectTimeout(10, TimeUnit.SECONDS) .readTimeout(10, TimeUnit.SECONDS) .writeTimeout(10, TimeUnit.SECONDS) .build(); apiClient.setHttpClient(okHttpClient); V1Pod pod = new V1Pod(); V1ObjectMeta metadata = new V1ObjectMeta(); metadata.setName("evaluation-task"); pod.setMetadata(metadata); V1PodSpec spec = new V1PodSpec(); V1Container container = new V1Container(); container.setName("evaluation"); container.setImage("tensorflow/tensorflow:latest-gpu"); List<String> command = new ArrayList<>(); command.add("python"); command.add("/app/evaluation.py"); container.setCommand(command); List<String> argsList = new ArrayList<>(); argsList.add("--model_path=/mnt/models/my-model.pb"); argsList.add("--dataset_path=/mnt/datasets/my-dataset.csv"); container.setArgs(argsList); V1EnvVar minioEndpoint = new V1EnvVar(); minioEndpoint.setName("MINIO_ENDPOINT"); minioEndpoint.setValue(MINIO_ENDPOINT); container.addEnvItem(minioEndpoint); V1EnvVar minioAccessKey = new V1EnvVar(); minioAccessKey.setName("MINIO_ACCESS_KEY"); minioAccessKey.setValueFrom(new V1EnvVarSource().secretKeyRef(new V1SecretKeySelector().name("minio-credentials").key("accesskey"))); container.addEnvItem(minioAccessKey); V1EnvVar minioSecretKey = new V1EnvVar(); minioSecretKey.setName("MINIO_SECRET_KEY"); minioSecretKey.setValueFrom(new V1EnvVarSource().secretKeyRef(new V1SecretKeySelector().name("minio-credentials").key("secretkey"))); container.addEnvItem(minioSecretKey); V1VolumeMount modelVolumeMount = new V1VolumeMount(); modelVolumeMount.setName("models"); modelVolumeMount.setMountPath("/mnt/models"); container.addVolumeMountsItem(modelVolumeMount); V1VolumeMount datasetVolumeMount = new V1VolumeMount(); datasetVolumeMount.setName("datasets"); datasetVolumeMount.setMountPath("/mnt/datasets"); container.addVolumeMountsItem(datasetVolumeMount); V1ContainerPort containerPort = new V1ContainerPort(); containerPort.setContainerPort(8080); container.addPortsItem(containerPort); spec.addContainersItem(container); V1Volume modelVolume = new V1Volume(); modelVolume.setName("models"); V1SecretKeySelector modelSecretKeySelector = new V1SecretKeySelector(); modelSecretKeySelector.setName("minio-credentials"); modelSecretKeySelector.setKey("accesskey"); V1Volume.Secret modelSecret = new V1Volume.Secret(); modelSecret.setSecretName("minio-credentials"); modelVolume.setSecret(modelSecret); spec.addVolumesItem(modelVolume); V1Volume datasetVolume = new V1Volume(); datasetVolume.setName("datasets"); V1SecretKeySelector datasetSecretKeySelector = new V1SecretKeySelector(); datasetSecretKeySelector.setName("pachyderm-credentials"); datasetSecretKeySelector.setKey("token"); V1Volume.Secret datasetSecret = new V1Volume.Secret(); datasetSecret.setSecretName("pachyderm-credentials"); datasetVolume.setSecret(datasetSecret); spec.addVolumesItem(datasetVolume); V1PodTemplateSpec template = new V1PodTemplateSpec(); template.setSpec(spec); pod.setSpec(spec); // 发布Pod DefaultApi defaultApi = new DefaultApi(apiClient); defaultApi.createNamespacedPod(K8S_NAMESPACE, pod, null, null, null); // 等待Pod完成 boolean isRunning = true; while (isRunning) { try { TimeUnit.SECONDS.sleep(5); V1Pod statusPod = defaultApi.readNamespacedPodStatus("evaluation-task", K8S_NAMESPACE, null, null, null); if (statusPod.getStatus().getPhase().equals("Succeeded")) { isRunning = false; } else if (statusPod.getStatus().getPhase().equals("Failed")) { throw new RuntimeException("Pod failed to execute"); } } catch (InterruptedException | ApiException e) { e.printStackTrace(); } } // 上传评估结果到MiniIO Item item = new Item(); item.objectName(MINIO_BUCKET_NAME + "/evaluation-results.csv"); minioClient.putObject("evaluation-results", "evaluation-results.csv", pachydermStream, null, null, null, null); } } ``` 这个代码示例假设您已经有了一个MinIO服务器和一个Pachyderm集群。您需要将MinIO和Pachyderm的端点和凭据配置为环境变量或属性文件。此外，您需要根据您的模型和数据集的位置修改代码示例中的路径。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值