- 博客(2)
- 收藏
- 关注
原创 MQ+REDIS+Elasticsearch千万级任务监控解决方案
背景介绍:某运营商云化数据中台全国业务生产任务监控,每天数据处理任务达千万级,要求做到任务报错、延迟实时告警,问题解决告警自动闭环关闭,以及亿级日志的快速查询要示。本篇文章重点介绍以下几点:1、任务日志如何做到实时告警2、解决消息时序问题3、告警闭环关闭实现方案4、上亿级日志秒级查询响应一 、任务日志如何做到实时告警采集RocketMQ实现生产任务的实时传输与消费,全国...
2022-03-08 21:05:10 2538
原创 数据治理-数据质量管理
一、数据质量是什么是数据管理能力成熟度评估(DCMM)模型中的8个能力域之一,是国际标准化组织发布的ISO9000标准中定义的“产品固有特性满足要求的程度”。对于数据来讲,数据质量是数据满足业务运营、管理决策等使用要求的程度。二、数据质量痛点经营分析相关部门了解数据质量存在问题,但是缺少直观感觉,缺乏推进动力。 数据质量问题需要领导大力支持,数据质量问题的解决需要领导的推动。 技术部门承担数据质量问题压力,确无力改变现状。 业务部门作为数据使用者,要求技术部门提高数据质量的同时,却对数据.
2022-03-08 21:00:58 1986
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人