ceph-dashboard 出现 Module ‘dashboard‘ has failed: IOError解决办法

Ceph Dashboard 故障
最新推荐文章于 2024-03-22 11:33:24 发布
最新推荐文章于 2024-03-22 11:33:24 发布
阅读量4.1k 收藏 4
点赞数
CC 4.0 BY-SA版权
分类专栏： ceph 文章标签： 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42440345/article/details/109608856
本文介绍了一种解决Ceph集群中Dashboard无法正常工作的问题的方法。主要包括两步操作：首先，通过配置指令将Dashboard服务迁移到另一个mgr节点；其次，重新启动Dashboard服务。

故障描述

故障如下图所示：
ceph状态信息
执行ceph mgr services显示结果如下所示：
在这里插入图片描述
根据上图链接，在浏览器上访问dashboard，出现如下图所示故障：
在这里插入图片描述

解决方案

1、将dashboard迁移至其它mgr节点

config set mgr mgr/dashboard/server_addr ceph-node2

2、重启dashboard

mgr module disable dashboard
mgr module enable dashboard
ceph v15.2.13版本[octopus]分布式集群部署
xiaxia2022的博客
09-17 1426
一．Ceph组件 OSDs:存储设备 Monitors:集群监控组件 RBD：对象存储网关 MDSs:存放文件系统的元数据.(但对象存储和块存储设备是不需要使用该服务的) Ceph版本镜像：ceph/daemon:latest-octopus版本号： ceph version 15.2.13 (c44bc49e7a57a87d84dfff2a077a2058aa2172e2) octopus (stable) 二．在 3 台服务器进行如下初始化 1.配置 hosts cat &...
使用ceph-deploy部署ceph集群并配置ceph-dashboard
云天空的博客
04-02 1436
1、准备工作 1.1 关闭selinux和时间同步（所有节点） systemctl disable firewalld && systemctl stop firewalld 或者开放端口 sudo firewall-cmd --zone=public --add-service=ceph-mon --permanent # on monitors sudo firewall-cmd --zone=public --add-service=ceph --permanent # on O
failed to load python_Bug #22880: failed to load ceph_module with Python3 - mgr - Ceph
weixin_33187773的博客
03-04 347
It's glad to see that python3 can be build with ceph-mgr, however```2018-02-01 16:39:54.385 7fd309ffb700 -1 mgr[py] Class not found in module 'status'2018-02-01 16:39:54.385 7fd309ffb700 -1 mgr[py] Er...
ceph mgr 配置telegraf 模块报错
YLX
12-17 625
1. 现象 Ceph Version: ceph version 14.2.5-389-gb0f23ac248 (b0f23ac24801724d9a7da89c2684f2b02bc9a49b) nautilus (stable) 执行 ceph telegraf config-set xxxxx命令时报如下错误： Error EIO: Module 'telegraf' has experienced an error and cannot handle commands: [Errno 2] No s
rook ceph问题解决
怨行客
01-04 1356
集群启动后，operator回一次启动一个mon，如果三个mon不能全启动，就不会向下进行。
Ceph可视化管理界面无法访问 Module ‘dashboard‘ has failed: IOError(“Port 8843 not free on ‘192.168.100.131‘“,)
你好啊cbw
11-20 2438
Ceph可视化管理界面无法访问 https://192.168.100.131:8443/#/dashboard ceph -s查看集群信息 Module 'dashboard' has failed: IOError("Port 8843 not free on '192.168.100.131'",) 解决： 1、将dashboard迁移至其它mgr节点 ...
CentOS7.6启用Ceph nautilus的dashboard失败处理
ygqygq2的IT博客
11-15 2633
文章目录1. 环境说明2. 启用ceph dashboard失败3. 问题排查过程4. 小结 1. 环境说明 软件 版本 操作系统 CentOS7.6 ceph nautilus, v14.2.4 ceph-deploy的nautilus版本安装和luminous版本一样，可以参考我以前的文章： https://blog.51cto.com/ygqygq2/2161917 ...
ceph-mgr-dashboard-14.2.7-0.el7.noarch.rpm
12-10
离线安装包，亲测可用
ceph-mgr-dashboard-14.2.0-1.el7.noarch.rpm
12-10
离线安装包，亲测可用
ceph-mgr-dashboard-14.2.10-1.el7.noarch.rpm
12-10
离线安装包，亲测可用
ceph-mgr 解决 No module named ‘pecan‘ 及 devicehealth failed 问题
Terry Tsang
05-19 449
解决 ModuleNotFoundError: No module named 'cherrypy'
后端部署出现异常
dark159735的博客
03-11 6057
一.nginx启动失败 问题：在修改完nginx配置文件后，我直接cmd中输入nginx -s reload后： nginx: [error] CreateFile() “G:\word\nginx-1.18.0/logs/nginx.pid” failed (2: The system cannot find the file specified) 解决：应该先cmd中输入nginx让nginx.pid这个文件先生成的。 .................................
Ceph dashboard 配置
LCK 博客
08-17 3709
Ceph-Dash 是用 Python 开发的一个 Ceph 的监控面板，用来监控 Ceph 的运行状态。同时 提供 REST API 来访问状态数据。 一、查看 Ceph 模块 Ceph mgr 是一个多模块化的组件，其组件可以单独的启用或关闭。 其操作在 ceph-deploy 服务器操作。 [ceph@ceph-deploy ceph-cluster]$ ceph mgr module ls # 列出 ceph 所有模块 二、启用 dashboard 模块 注意事项：模块启用后还不能直接访问
安装好dashboard 登录出现错误
aliantou4416的博客
12-16 799
验证发生错误。请稍后再试一次。 While turning SELinux off certainly does the trick, it is somewhat like using a sledgehammer to break a nut. The similar problem was solved for me with by allowing apache to init...
linux 基于三台物理机安装ceph nautilus
tobias的博客
08-13 1066
一 摘要 本文基于三台物理机部署ceph ,物理机都安装了centos7.6.1810,三台物理机品牌不一样，硬盘配置不一样。 二 环境信息及部署规划 （一）操作系统版本 [root@localhost ~]# cat /etc/centos-release CentOS Linux release 7.6.1810 (Core) [root@localhost ~]# (二)ceph 版本 (三)物理机信息 2.3.1 机器配置 品牌 物理机配置 Huashan Technologies
Ceph部署在Centos7上简明摘要
麒思妙想
07-15 480
最近需要研究Ceph，也部署了一下环境，本文分为1,2,3,4章为概念介绍，第5章为实践环节。1 Ceph基础介绍Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储...
手动部署ceph17.2.5
m0_46527921的博客
03-22 1268
1、编辑 /etc/apt/sources.list 加上ceph17.2.5的源deb2、加载软件包3、加载软件包会报错使用以下命令即可解决，然后重新apt update。
centos7部署ceph+dashboard（nautilus）
lvbibir的博客
12-23 1467
前言 ceph测试环境的搭建 基本环境 物理环境：Vmware Workstaion 系统版本：Centos-7.9-Minimal 两个osd节点添加一块虚拟磁盘，建议不小于20G ip hostname services 192.168.150.101 ceph-admin(ceph-deploy) mds1、mon1、mon_mgr、ntp-server 192...
Ceph mgr devicehealth模块加载报错
ygqygq2的IT博客
11-20 2669
文章目录1. 问题说明2. 解决办法 1. 问题说明 软件 版本 操作系统 CentOS7.6 ceph nautilus, v14.2.4 因为是刚搭建完ceph不久, rgw之前暂时没用到就没有添加。 今天添加rgw后，通过重启dashboard，发现报Error了。 ceph mgr module disable dashboard ceph mgr module e...
2025-03-29 10:14:00.654114 I | op-mgr: deployment for mgr rook-ceph-mgr-a already exists. updating if needed 2025-03-29 10:14:00.660132 I | op-k8sutil: deployment "rook-ceph-mgr-a" did not change, nothing to update 2025-03-29 10:14:00.660179 I | cephclient: getting or creating ceph auth key "mgr.b" 2025-03-29 10:14:00.918206 I | op-mgr: deployment for mgr rook-ceph-mgr-b already exists. updating if needed 2025-03-29 10:14:00.922071 I | op-k8sutil: deployment "rook-ceph-mgr-b" did not change, nothing to update 2025-03-29 10:14:02.012907 E | ceph-cluster-controller: failed to reconcile CephCluster "rook-ceph/rook-ceph". failed to reconcile cluster "rook-ceph": failed to configure local ceph cluster: failed to create cluster: failed to start ceph mgr: failed to enable mgr services: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-mgr" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:14:02.052359 E | ceph-spec: failed to update cluster condition to {Type:Ready Status:True Reason:ClusterCreated Message:Cluster created successfully LastHeartbeatTime:2025-03-29 10:14:02.048230153 +0000 UTC m=+9812.323876586 LastTransitionTime:2025-03-29 08:40:15 +0000 UTC}. failed to update object "rook-ceph/rook-ceph" status: Operation cannot be fulfilled on cephclusters.ceph.rook.io "rook-ceph": the object has been modified; please apply your changes to the latest version and try again 2025-03-29 10:25:15.419892 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:25:16.017269 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:25:18.622406 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph"
最新发布
03-30
<think>好的，我现在需要帮助用户分析他们提供的日志信息。首先，用户展示的日志涉及Rook-Ceph在Kubernetes集群中的部署问题，特别是关于ServiceMonitor资源的访问权限问题。 首先，我要理解日志中的关键错误信息。第一条错误是用户`system:serviceaccount:rook-ceph:rook-ceph-system`无法获取`servicemonitors.monitoring.coreos.com`资源。这表明服务账号缺少必要的RBAC权限。接下来的错误提到了`servicemonitors.monitoring.coreos.com "rook-ceph-mgr"`和`"rook-ceph-exporter"`无法被访问，同样是因为权限问题。另外，还有一个关于更新集群状态时的资源版本冲突，这可能是因为并发修改导致的，但核心问题还是权限问题。 接下来，我需要考虑解决方案。通常，Kubernetes中的权限问题需要通过Role和RoleBinding来解决。用户需要确保服务账号`rook-ceph-system`在命名空间`rook-ceph`中有权限访问`servicemonitors`资源。这涉及到创建或更新对应的Role和RoleBinding，赋予`get`、`create`、`update`等权限。 另外，用户可能需要检查Rook的配置，特别是CephCluster CRD中的`spec.monitoring`部分是否启用了ServiceMonitor，并且相关的Prometheus监控配置是否正确。如果配置正确，但权限不足，仍然会导致问题。 还要考虑Kubernetes集群中是否安装了Prometheus Operator，因为ServiceMonitor是Prometheus Operator提供的CRD。如果未安装，那么即使有权限也无法创建该资源，但根据错误信息，问题更可能出在权限而非资源不存在。 总结处理步骤应该是：检查并添加RBAC权限，验证配置，然后重新部署或更新Rook-Ceph集群。此外，资源版本冲突可能需要重试操作，但首要解决权限问题。 需要确保回答结构清晰，分步骤说明，并且建议用户如何实施每个步骤，比如应用RBAC配置文件，检查现有配置等。同时，提醒用户可能需要的后续操作，如重启Operator或验证监控配置是否正确。</think>以下是日志问题的逐步分析及解决方案： --- ### **问题定位** 日志核心错误是 **RBAC权限不足**，具体表现为： ``` servicemonitors.monitoring.coreos.com "rook-ceph-mgr" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" ``` 服务账号 `rook-ceph-system` 缺少操作 `servicemonitors` 资源的权限。 --- ### **根本原因** 1. **缺少RBAC配置** Rook-Ceph的Operator需要权限管理 `servicemonitors.monitoring.coreos.com` 资源（属于Prometheus监控体系），但默认安装可能未自动授予相关权限。 2. **Prometheus监控集成未正确配置** 如果启用了Ceph集群的监控功能（例如通过 `spec.monitoring.enabled=true`），但未正确配置ServiceAccount权限，则触发此错误。 --- ### **解决方案** #### **步骤1：添加RBAC权限** 为 `rook-ceph-system` 服务账号绑定操作 `servicemonitors` 的权限： ```yaml # service-monitor-rbac.yaml apiVersion: rbac.authorization.k8s.io/v1 kind: Role metadata: name: rook-ceph-monitoring namespace: rook-ceph rules: - apiGroups: ["monitoring.coreos.com"] resources: ["servicemonitors"] verbs: ["get", "list", "watch", "create", "update", "patch", "delete"] --- apiVersion: rbac.authorization.k8s.io/v1 kind: RoleBinding metadata: name: rook-ceph-system-monitoring namespace: rook-ceph roleRef: apiGroup: rbac.authorization.k8s.io kind: Role name: rook-ceph-monitoring subjects: - kind: ServiceAccount name: rook-ceph-system namespace: rook-ceph ``` 应用配置： ```bash kubectl apply -f service-monitor-rbac.yaml ``` #### **步骤2：验证CephCluster配置** 检查CephCluster自定义资源中是否启用了监控： ```yaml apiVersion: ceph.rook.io/v1 kind: CephCluster metadata: name: rook-ceph namespace: rook-ceph spec: monitoring: enabled: true # 确保Prometheus Operator已安装 rulesNamespace: rook-ceph ``` #### **步骤3：重启Rook-Ceph Operator** 更新RBAC后，重启Operator以加载新权限： ```bash kubectl -n rook-ceph rollout restart deploy/rook-ceph-operator ``` #### **步骤4：检查Prometheus Operator** 确保集群中已部署 **Prometheus Operator**，因为 `ServiceMonitor` 是其管理的CRD： ```bash kubectl get pods -n monitoring | grep prometheus-operator ``` --- ### **附加说明** - **资源版本冲突警告** 日志中 `Operation cannot be fulfilled on cephclusters.ceph.rook.io...` 是典型的并发修改冲突，通常由Operator自动重试解决，无需手动干预。 - **权限生效延迟** RBAC更新后可能需要1~2分钟生效，若问题未解决，请检查RoleBinding是否关联到正确的ServiceAccount。 --- ### **验证操作** 观察Operator日志，确认权限错误消失： ```bash kubectl -n rook-ceph logs -l app=rook-ceph-operator --tail=100 ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值