基于Doris构建亿级数据实时数据分析系统 随着公司业务快速发展，对业务数据进行增长分析的需求越来越迫切，与此同时我们的业务数据量也在快速激增、每天的数据新增量大概在30w 左右，一年就会产生1 个亿的数据，显然基于传统MySQL数据库已经无法支撑满足以上需求基于上述需求和痛点，决定提供一个灵活的多维实时查询和分析平台，帮助业务线做精细化运营。
什么是数据同步利器DataX，如何使用？ DataX 是阿里云DataWorks数据集成的开源版本，使用Java 语言编写，在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX 实现了包括 MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS, databend 等各种异构数据源之间高效的数据同步功能。
10 分钟在K8s 中部署轻量级日志系统 Loki 以上我们快速演示了如何在 k8s 中部署一个Loki，可以看到非常简单，由于Loki 对k8s友好支持，默认就可以采集到pod、namespace 等标签数据，不需要额外配置，但是要达到生产级可用，还需要对 Loki的数据进行持久化配置、同时要根据采集日志数据的大小做好采集速率调整、以及日志过期策略设置又到过年了，龙年红包封面是必备的，大家不要花钱购买了，我制作一款封面红包，数量4千个，效果如下领取方法，关注公众号架构成长指南，回复「封面」领取。
Kubernetes包管理神器Kustomize与Helm对比 Kustomize 是 k8s集群的配置定制工具。它允许管理员使用非模板文件进行声明性更改，而不影响原始清单文件。所有自定义规范都包含在文件中，该文件将规范叠加在现有清单之上以生成资源的自定义版本。比如我们有一个应用，需要在生产环境和测试环境部署，并且它的 yaml 配置大部分是相同的，只有少数的字段不同，那么这时候就可以用kustomize 来解决下面通用示例演示如何使用 Kustomize 进行最小 K8s 部署，将资源部署到开发和生产环境。
分库分表已成为过去式，快试试分布式数据库 当我们使用 Mysql数据库到达一定量级以后，性能就会逐步下降，而解决此类问题，常用的手段就是引入数据库中间件进行分库分表处理，比如使用 `Mycat`、`ShadingShpere`、`tddl`，但是这种都是过去式了，现在使用分布式数据库可以避免分库分表
并发扣款，如何保证结果一致性 保证在高并发下场景下，对账户余额操作的一致性，是非常重要的，如果代码写的时候没考虑并发一致性，就会导致资损，本人在金融行业干了 8 年多，对这块稍微有点经验，所以这篇聊一下，如何在并发场景下，保证账户余额的一致性
如何使用 Prometheus 监控SpringBoot系统 在[从零开始：使用Prometheus与Grafana搭建监控系统中，主要讲解了如何使用监控系统资源并进行告警，这节主要分享下，如何在业务系统中使用Prometheus来监控业务系统指标，业务系统使用Spring Boot构建。
5 分钟体验下一代轻量级日志分析系统Loki Loki是由Grafana Labs开源的一个水平可扩展、高可用性，多租户的日志聚合系统的日志聚合系统。它的设计初衷是为了解决在大规模分布式系统中，处理海量日志的问题。Loki采用了分布式的架构，并且与Prometheus、Grafana密切集成，可以快速地处理大规模的日志数据
SRE 与 DevOps：你知道它们之间区别吗？ DevOps专注于消除阻碍开发和运维之间协作的隔阂，而SRE致力于设计和实施可扩展、可靠的系统，确保最大可靠性。这篇文章将探讨DevOps和SRE之间的差异，它们的角色和责任，它们解决的问题以及它们使用的工具。
如何使用Promethues监控系统指标并进行告警 在以上二节，我们介绍了如何使用Prometheus的Pull和Push模式来采集系统指标并在 Grafana进行展现，本节我们介绍如何使用Prometheus的AlertManager进行邮件告警通知。morePrometheus是一种用于监控和告警的开源系统，而Alertmanager是Prometheus生态系统中的一个组件，主要用于告警通知。
Prometheus如何使用 Push 方式采集目标服务器数据 在上篇，我们了解了Prometheus采集数据主要是采用Pull模式，即主动拉取模式，这种方式虽然简单，但是有一定限制，比如服务器A部署在边缘端与Prometheus部署在云端，两者网络不通，因此不能采用Pull模式。more那么如何获取服务器 A 的指标？答案就是采用，这里Pushgateway充当了一个桥接的作用，把Pushgateway服务暴漏一个公网地址，然后服务器 A 与Prometheus都能连接即可。
关注
