kafka灰度发布解决方案

最新推荐文章于 2024-05-23 14:43:41 发布
最新推荐文章于 2024-05-23 14:43:41 发布
阅读量1.3k 收藏
点赞数
文章标签： kafka java 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liuyang_deve/article/details/126785015
版权

Kafka灰度发布解决方案

场景

由于我们生产环境和灰度环境共用一套kafka，灰度环境主要用于线上验证和紧急问题修复，但是有时灰度发布后，会消费生产环境的kafka数据，影响生产环境的稳定性

设计方案

暂时没有时间写具体的设计方案，先放张设计图，给大家提供些思路，主要原理是：

  1. 项目启动时，动态修改KafkaLister监听的topic变量
  2. kafka发送时，进行前置拦截，动态给topic添加指定后缀

在这里插入图片描述

liuyang_deve
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
vivo大规模机器学习实践.pdf
10-14
经验包括重视实时特征工程、日志记录、模型验证和灰度发布。 4. **第三代解决方案**： - 引入召回模块，支持多条拉链并行召回和离线/在线更新，提升了系统的灵活性和效率，特别适合信息流推荐、关联广告和搜索广告...
使用kafka服务进行灰度发布实现方案
Hatakefiftyfifty的博客
06-12 1601
Kafka消费者灰度发布
灰度发布整体解决方案
xuejun_1996的博客
02-06 1272
灰度发布整体解决方案
终于有人把灰度发布架构设计讲明白了
最新发布
犬小哈
05-23 22
???? 欢迎加入小哈的星球，你将获得:专属的项目实战 / Java 学习路线 /一对一提问 / 学习打卡 / 每月赠书新项目:仿小红书(微服务架构)正在更新中... , 全栈前后端分离博客项目 2.0 版本完结啦，演示链接：http://116.62.199.48/。全程手摸手，后端 + 前端全栈开发，从 0 到 1 讲解每个功能点开发步骤，1v1 答疑，直到项目上线。目前已更新了261小...
手撕灰度发布
super_scan的专栏
05-30 131
架构模型：K8S+Dubbo微服务+分库目标：通过k8s Ingress实现数据分库的灰度发布（网关灰度+服务灰度+数据灰度）理论基础：k8s Ingress 负载均衡，根据 header...
第二十五篇：稳定性之灰度发布
jackl
09-12 613
随着用户规模逐渐增长、产品的更新频繁，新版的每次上线，各方都要承受极大的压力，一旦产品发布出现事故，可能影响的范围和损失都比较大，为了解决产品发布过程中的风险控制，要有部分的用户参与到新产品中，体验使用观测其真实反馈，如果没有用户的参与，直接面对全量用户，那么风险是可想而知的。
灰度发布方案
blues的博客
11-24 1382
编辑导语：灰度，就是存在于黑与白之间的一个平滑过渡的区域。对于互联网产品来说，上线和未上线就是黑与白之分，而实现未上线功能平稳过渡的一种方式就叫做灰度发布。不少大厂在产品上线前都会进行灰度测试，本文作者为大家总结了大厂常用的几种灰度发布方案。 什么是灰度发布？百度百科的解释是这样的： 灰度发布是指在黑与白之间，能够平滑过渡的一种发布方式。AB test就是一种灰度发布方式，让一部分用户继续用A，一部分用户开始用B，如果用户对B没有什么反对意见，那么逐步扩大范围，把所有用户都迁移到B上面来。灰度发布可
灰度发布
qq_27909209的博客
08-22 1974
灰度发布，已经不是一个很新的概念了．一个产品，如果需要快速迭代开发上线，又要保证质量，保证刚上线的系统，一旦出现问题那么可以很快的控制影响面，就需要设计一套灰度发布系统． 灰度发布系统的作用在于，可以根据自己的配置，来将用户的流量导到新上线的系统上，来快速验证新的功能修改，而一旦出问题，也可以马上的恢复，简单的说，就是一套A/BTest系统． 它大抵的架构，应该是类似这样的：
喜马拉雅微服务服务化实践.pdf
10-11
喜马拉雅的微服务服务化实践是一次深入的IT解决方案，旨在解决随着业务增长和用户量增加带来的系统复杂性问题。在起步阶段，面临的主要挑战是业务越来越多，维护和迭代变得复杂，用户量快速增长，这使得传统的单体...
企业级消息中间件DevOps之路.pptx
10-15
【企业级消息中间件DevOps之路】探讨了在IT行业中，如何通过DevOps实践来优化企业级消息中间件的开发、运维流程，并介绍了多种消息中间件解决方案。消息中间件是现代分布式系统中的重要组成部分，它提供了业务解耦、...
云原生时代消息中间件的演进路线.pptx
10-15
云原生时代的到来，对消息中间件带来了深刻的变革。...未来，云原生消息服务将进一步提升核心竞争力，构建更完善的消息生态，推动技术的创新与进步，为用户带来更高效、稳定且经济的消息解决方案。
微服务技术架构实战.pdf
10-11
针对这些挑战，书中提出了采用微服务架构作为解决方案。微服务架构的核心思想是将大型单一应用拆分为一系列小而独立的服务，每个服务专注于特定的功能，通过API进行通信。这种架构模式能够降低复杂性，提高开发效率...
灰度升级方案
zollty的专栏
02-26 6877
首要目的：利用线上服务器、线上数据，做系统的测试（主要是功能测试）。 其他目的：利用线上服务器、线上数据，做一个特殊用途的应用（只是客户端不一样，内部处理流程都和正式系统一样）。   必要原则： 1、灰度系统的主要程序流程和正式环境一样，否则灰度系统没有测试和验证的意义。 2、从灰度环境，不用再次上线，能够快速地切换到正式环境。   关键思路： 1、把少部分数据引入灰度系统，数据的...
Kafka生产端实际项目中的使用分析
xiexiaojing的博客
03-31 963
Kafka概述Kafka整体架构Kafka原理和使用的文章网上很多了，这里只做总体性的概述，拉齐下知识背景。不是本文的重点。Kafka是LinkedIn公司使用Scala语言开发，后来捐献...
【项目管理】灰度发布（灰度放量）
午后阳光
06-01 926
1，概念 1）蓝绿部署 两套环境，一套正在提供服务（旧版），标记为绿色；一套是准备发布的系统（新版），标记为蓝色。用户流量接到蓝色系统上，经过反复的测试、修改、验证，确定达到上线标准之后，直接将用户切换到蓝色系统, 切换后的一段时间内，依旧是蓝绿两套系统并存，但是用户访问的已经是蓝色系统。这段时间内观察蓝色系统（新系统）工作状态，如果出现问题，直接切换回绿色系统。 优缺点 蓝绿部署的目的是减少发布时的中断时间、能够快速撤回发布。两套系统没有耦合的时候才能百分百保证不干扰。 2）金丝雀部署（版本试错） 大部.
分布式系统灰度发布实践
黄老师的博客
01-23 2669
文章目录0、分布式系统灰度要实现的功能清单1、携带灰度因子1.1、Http请求中1.2、JVM中1.3、调用链中2、前端资源灰度2.1、方案一：基于verynginx2.2、方案二：基于istio Envoy3、Rest API请求灰度4、分布式RPC（Dubbo）调用灰度4.1、概览4.1、实现原理拆解4.2、Dubbo URL4.3、Zookeeper与Dubbo4.4、开发点-1：Provider支持自动注册为Grey版本的Dubbo Service4.5、开发点-2：Consumer支持自动记录Gr
实现一套灰度发布系统需要考虑哪些问题？
IChen.的博客
03-09 1412
仔细考虑一下灰度发布系统要达到哪些目的，基本就能有答案了。需要注意的是，客户端应用（无论PC端还是移动端）的灰度发布要比Web应用的灰度发布更为复杂，因为应用运行在用户持有的终端上，数据采集和回滚都更为困难（但可采集的数据类型要更加丰富）。 注：本人缺乏移动客户端产品的经验，下述内容可能不适用于移动客户端产品。 我所理解的灰度发布系统，主要任务是从产品用户群中按照一定策略选取部分用户，让他们先行体验新版本的应用，通过收集这部分用户对新版本应用的显式反馈（论坛、微博）或隐式反馈（应用自身统计数据），对新版本应
灰度发布系统架构设计
weixin_45727359的博客
01-04 974
灰度发布的定义互联网产品需要快速迭代开发上线，又要保证质量，保证刚上线的系统，一旦出现问题可以很快控制影响面，就需要设计一套灰度发布系统。灰度发布系统的作用，可以根据配置，将用户的流量导...
Kafka-m.docx
03-12
Kafka-m

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值