智能运维基础-运维知识库之ETL

本文介绍了百度云Noah智能运维产品在构建运维知识库时的ETL系统架构。运维知识库包含元数据、状态数据和事件数据,通过统一的数据模型管理和转换。ETL机制分为拉取、推送和懒加载三种方式,以适应离线、近线和实时数据的建设需求,实现数据的统一和高效利用。
摘要由CSDN通过智能技术生成

640?wx_fmt=gif

作者简介

H++    百度云高级研发工程师

640?wx_fmt=png

负责百度云Noah智能运维产品元数据建设、时序数据存储相关研发工作,在分布式系统架构、高性能数据服务、数据清洗等方向有着较为广泛的实践经验。

 

干货概览

在百度智能化运维的持续演进过程中,我们在逐步建设以智能运维机器人为核心的运维能力,将其应用于故障自愈、根因定位、智能变更等运维场景中。而建设以智能运维机器人为核心的运维能力,最基础的工作是要先建立运维的世界观(环境模型),以机器人的视角来理解运维世界、感知系统状态、获取环境变化等。

在传统运维模式中,运维数据分散在不同的系统中,这些运维数据存在几个问题:访问方式不一致;数据术语、概念、模型不一致;系统间没有数据关联

这些问题使得我们日常的运维工作,经常需要理解处理各种不同的数据,导致运维成本高效率难以

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值