中海庭罗凯：Prometheus监控Argo Workflow云原生工作流的方法

​嘉宾 | 罗凯   整理 | 李天天

出品 | CSDN云原生

业务中当前有多少个端到端工作流实例，它们的状态是什么？在过去的24小时内，有多少个工作流实例未成功完成？为什么未成功完成？完成工作流程实例或工作流程中的特定步骤平均需要多少时间？

针对以上发问，2022年8月9日，CSDN云原生系列在线峰会第15期“Prometheus峰会”上，中海庭运维开发工程师罗凯从企业业务形态及云原生工作流的使用情况入手，分享了Prometheus监控Argo Workflow云原生工作流的方法。

Argo Workflow监控实例

容器化CI + Argo Workflow实现生产的Devops

在引入K8s前，一般使用传统PC工具对数据入库、任务排产及任务派发进行处理，该过程需要人工处理、手动配置，但存在诸多弊端：

• PC算力有限，大数据集情况下，人工处理效率低下；

• 手动配置易出错，难以及时发现问题。

于是，我们引入了K8s，利用Argo Workflow任务编排调度实现数据的自动化处理。

引入K8s后的数据流向图

• 从传统PC工具转型Web化工具，通过容器沙箱提供生产需要的工具并通过CI/CD集成相应的数据容器组成独立的沙箱工作环境，并在需要与人交互的环节提供Web界面和专用的Web访问地址。

• 规范化作业信息流、数据流，自动化代替手动环境准备。

• 操作数据集的提交、流转通过CI/CD自动完成。