• 博客(103)
  • 收藏
  • 关注

原创 消息队列 RocketMQ 5.x 系列产品重磅发布

腾讯云消息队列 RocketMQ 5.x 系列商业化产品作为 TDMQ 产品家族的新成员在本次大会上重磅发布。

2023-09-13 11:27:45 337

原创 万字长文分享腾讯云原生微服务治理实践及企业落地建议

在前不久举办的全球开源技术峰会上,腾讯云产品资深架构师侯诗军发表了《腾讯海量云原生微服务架构建设之路》的主题演讲,本次分享以腾讯微服务架构建设为主,介绍了 TSF、北极星(PolarisMesh)和微服务治理方面的实践经验,并和各行业内人士一起交流了企业实际开展云原生微服务架构转型的落地心得与建议。

2024-09-12 11:47:37 1280

原创 基于 TDMQ for Apache Pulsar 的跨地域复制实践

自2024年9月6日起,TDMQ Pulsar 版专业集群支持消息、元数据两级跨地域复制功能,消息级复制解决用户全球地域的数据统一归档问题,元数据级复制提供解决用户核心业务跨地域容灾的场景。

2024-09-10 15:54:08 1280

原创 PolarisMesh源码系列——服务实例健康检查

PolarisMesh(北极星)是腾讯开源的服务治理平台,致力于解决分布式和微服务架构中的服务管理、流量管理、配置管理、故障容错和可观测性问题,针对不同的技术栈和环境提供服务治理的标准方案和最佳实践。

2024-07-18 14:40:31 791

原创 Apache BookKeeper 一致性协议解析

我们常见的一致性协议,比如 Raft、Kafka、ZAB 等,都是服务端集成协议(协议控制和数据存储绑定),简单来说一致性协议由服务端存储节点来执行。数据流向通常是客户端写数据到 Leader 节点,其他节点再通过推或拉的方式从 Leader 获取数据。而 BK 的一致性协议控制和存储是分开的,协议控制是在客户端执行,可以称之为外部一致性协议,或者客户端一致性协议。数据流向为客户端向多台存储节点同时写入数据,存储节点之间基本不通信。由于一致性协议主要是在客户端执行,本文聚焦于 BK 客户端的实现。

2024-07-18 11:49:18 1385

原创 PolarisMesh源码系列--Polaris-Go注册发现流程

北极星通过对服务治理标准的实现,提供了完善的服务发现和治理方案。同时, SDK客户端与 Server 服务端的数据同步与交互,也有设计良好的服务治理模型和健壮的通信机制提供了可靠的保障。此外,通过插件机制,SDK框架 也提供了灵活扩展的能力。

2024-07-18 11:18:03 895

原创 PolarisMesh源码系列——服务如何注册

PolarisMesh(北极星)是腾讯开源的服务治理平台,致力于解决分布式和微服务架构中的服务管理、流量管理、配置管理、故障容错和可观测性问题,针对不同的技术栈和环境提供服务治理的标准方案和最佳实践。

2024-07-09 18:09:56 682

原创 PolarisMesh源码系列——服务端启动流程

PolarisMesh(北极星)是腾讯开源的服务治理平台,致力于解决分布式和微服务架构中的服务管理、流量管理、配置管理、故障容错和可观测性问题,针对不同的技术栈和环境提供服务治理的标准方案和最佳实践。

2024-07-09 14:51:19 1088

原创 Flink 基于 TDMQ Apache Pulsar 的离线场景使用实践

Apache Flink是一个开源的流处理和批处理框架,具有高吞吐量、低延迟的流式引擎,支持事件时间处理和状态管理,以及确保在机器故障时的容错性和一次性语义。

2024-06-04 12:00:45 1054

原创 海量消息下王者荣耀在 TDMQ Pulsar 的实践

腾讯云 TDMQ for Apache Pulsar 版(简称TDMQ Pulsar版)是基于 Apache Pulsar 自研的消息中间件,具备极好的云原生和 Serverless 特性,计算存储分离的架构使其在扩缩容方面具备良好的底层优势。

2024-06-03 18:08:27 914

原创 腾讯云 TDMQ for Apache Pulsar 多地区高可用容灾实践

本文将从四个维度,深入剖析 Pulsar 在多可用区高可用领域的容灾策略。首先,我们将从整体架构的角度切入,洞察其设计之精髓;其次,我们将探寻 Pulsar 在云原生领域的努力;再者,我们将聚焦 Pulsar 在高可用方面的设计,展现其稳健可靠的特性;最后,我们延申拓展 Pulsar 在跨地区同步方面的未来规划。

2024-06-03 15:48:17 1262 1

原创 TDMQ CKafka 版弹性存储能力重磅上线!

自 2024年5月起,TDMQ CKafka 专业版支持弹性存储能力,这种产品形态下,存储可按需使用、按量付费,一方面降低消费即删除、存储使用波动大场景下的存储成本,另一方面存储空间理论上无穷大。

2024-06-03 15:07:03 553 1

原创 Pulsar Meetup 深圳 2024 会务介绍

由 AscentStream 谙流科技和腾讯云中间件联合主办的 Pulsar Meetup 深圳 2024 将于 2024年04月27日 14:00-18:00 在深圳腾讯大厦2楼多功能厅,精彩呈现,期待大家多多报名!

2024-04-25 10:15:22 734

原创 Pulsar Meetup 深圳 2024 讲师和议题介绍

由 AscentStream 谙流科技和腾讯云中间件联合主办的 Pulsar Meetup 深圳 2024 将于 2024年04月27日 周六 14:00-18:00 在深圳腾讯大厦2楼多功能厅,精彩呈现,期待大家多多报名!

2024-04-23 11:38:04 932

原创 邀请函 | Pulsar Meetup 深圳 2024

Pulsar Meetup 深圳 2024 将于 2024 年 4 月 27 日 周六举办,此次活动由 AscentStream 谙(ān)流科技和腾讯云中间件联合举办。Apache Pulsar 社区和合作伙伴诚邀 Pulsar 和各大社区的小伙伴、广大技术爱好者、架构师和企业代表参与。

2024-04-19 14:49:32 471

原创 可观测新能力:Pulsar 支持接入 Prometheus 监控

本文给大家带来 Pulsar 在可观测性方向的重要能力——支持接入 Prometheus 监控。

2024-04-17 11:45:21 1000

原创 FiT 基于 Pulsar 在金融在线高并发场景的最佳实践

FiT 在日常的交易流程中,如信用卡、话费充值、自选股等业务中,需要通过消息中间件来实现上游和下游衔接,以实现广播、过滤、延迟推送等场景。同时由于 FiT 均是交易类场景,对消息产品的高并发、容灾有非常高的要求。比如,在可预期的业务高峰期时,对消息队列集群进行快速扩容;在非预期的可用区故障时,其余可用区可以正常提供服务,保障交易业务的流畅性。于是 TDMQ Pulsar 进入了 FiT 的消息队列技术选型范畴。

2024-04-16 11:04:11 867

原创 云原生消息流系统 Apache RocketMQ 在腾讯云的大规模生产实践

本文将围绕 RocketMQ 5.x 的新特性展开探讨,详细解读其在腾讯云上的实际应用案例,并展望未来的发展规划。

2024-03-13 17:07:10 1524 1

原创 云原生 API 网关链路追踪能力重磅上线

云原生 API 网关是腾讯云基于开源网关推出的一款高性能高可用的云原生 API 网关产品,作为云上流量入口,集成请求分发、API 管理、流量监控、访问限制等功能,是微服务架构和容器架构中的重要组件。TSE 云原生 API 网关提供多可用区容灾部署、多种接入方式统一管理能力、开箱即用的限流熔断、流量灰度、流量镜像、安全防护等能力。对于存在流量波峰波谷性质的业务,TSE 云原生 API 网关同样支持弹性伸缩和定时伸缩实现对网关节点的伸缩。

2024-02-02 11:17:56 1296

原创 【腾讯云中间件】2023年热门文章集锦

各位读者,大家好!光阴似箭,日月如梭,仿佛冬奥会的盛况还在眼前,新的一年却即将到来。在过去的一年里,我们见证了腾讯云中间件在产品升级与创新方面的显著进步,包括消息队列TDMQ品牌全新升级和新产品发布,微服务引擎升级与异地多活单元化能力发布等。腾讯云中间件团队一直秉承持续创新的精神,致力于为行业带来更加优质的产品和服务。在过去的一年里,我们见证了产品升级与创新带来的显著成果。团队不断优化产品性能,提升用户体验,以满足不断变化的市场需求。

2023-12-29 11:10:59 1030

原创 关于MQ,你了解多少?(干货分享之二)

本文梳理笔者 MQ 知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括 RabbitMQ、RocketMQ、Kafka、Pulsar,最后再横向对比这几款主流的消息中间件。本篇是系列文章第二篇。

2023-12-20 15:01:16 474

原创 云原生消息流系统 Apache Pulsar 在腾讯云的大规模生产实践

本文分享了腾讯云团队在 Apache Pulsar 稳定性上的实践经验,重点介绍了消息空洞的影响及规避措施等最佳实践,为更多开发者提供参考。

2023-12-20 14:38:45 1564

原创 关于MQ,你了解多少?(干货分享之一)

本文梳理笔者 MQ 知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括 RabbitMQ、RocketMQ、Kafka、Pulsar,最后再横向对比这几款主流的消息中间件。

2023-12-20 11:09:03 972

原创 小鹅通基于 TSE 云原生 API 网关的落地实践

本篇文章针对这场演讲做了详细的解读。主要介绍小鹅通在 TSE 云原生 API 网关上的一些建设和经验,以及在这个过程中遇到了哪些问题和挑战,基于 TSE 的解决方案又是如何在小鹅通进行落地的,以及如何利用云原生网关实现降本增效的经验分享。

2023-12-20 10:37:16 1314

原创 Apache Pulsar 技术系列 - PulsarClient 实现解析

Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO replication)、快速扩容、灵活容错等特性。同时为了达到高性能,低延时、高可用,Pulsar 在客户端也做了很多的优化,本文主要讲述 PulsarClient 基本原理和实现。

2023-12-20 10:14:05 1226

原创 腾讯云消息队列11月产品月报 | RocketMQ 5.x 国际站上线

2023年 11月动态消息队列 RocketMQ 版1、5.x 形态国际站上线国际站上线 5.x 集群全系列,第一批先开放新加坡和硅谷地域。控制台链接:https://console.tencentcloud.com/trocketmq2、 无感迁移能力支持用户白屏化操作,将自建的 RocketMQ 集群迁移到 RocketMQ 5.x 集群上,迁移全过程可视化操作,并且支持迁移中的状态回滚。官网链接:https://cloud.tencent.com/document/product/14

2023-12-19 16:53:41 1146

原创 腾讯云微服务11月产品月报 | TSE 云原生 API 网关支持 WAF 对象接入

TSF 数据集支持微服务网关、全链路灰度发布策略、日志投递项、自定义日志配置,帮助您更好的管理网关、日志配置、灰度发布策略的权限配置。TSE 治理中心(北极星)云控制台支持服务路由、熔断降级、服务限流等流量管理能力,无需您再跳转独立控制台,极大提升您的操作便捷性。TSE 治理中心(北极星)配置管理支持配置版本、发布历史、版本间对比以及配置回滚,帮助您更好的管理配置的版本,遇到问题及时回滚。云原生 API 网关即将支持链路追踪,方便您查看网关与后端服务的调用信息,以进行分析诊断。

2023-12-19 15:18:11 1377

原创 Kafka 分级存储在腾讯云的实践与演进

腾讯云消息队列 Kafka 内核负责人鲁仕林为大家带来了《Kafka 分级存储在腾讯云的实践与演进》的精彩分享,从 Kafka 架构遇到的问题与挑战、Kafka 弹性架构方案类比、Kafka 分级存储架构及原理以及腾讯云的落地与实践四个方面详细分享了 Kafka 分级存储在腾讯云的实践与演进。

2023-12-19 10:59:45 3229

原创 Apache RocketMQ 5.0 腾讯云落地实践

Apache RocketMQ 社区在2022年10月正式对外发布了全新的5.0版本,腾讯云消息队列团队也和社区紧密合作,支持了5.0的商业化版本,现在将整个落地过程的经验教训做个总结,回馈社区。

2023-12-18 17:20:57 1561

原创 RocketMQ 5.X PopAck 源码拆解

分享 RocketMQ 5.X Pop,Ack 源码解读。

2023-12-15 16:49:43 216

原创 CKafka 一站式搭建数据流转链路,助力长城车联网平台降低运维成本

通过合理的架构设计和灵活的产品能力,CKafka 帮助用户在云上以更低成本托管高吞吐、高可用、易用免运维的消息队列 Kafka 服务,一站式搭建数据流转链路。后续也期待与出行行业客户有更多合作,分享更多云上最佳实践。

2023-12-01 10:30:09 615

原创 Apache Pulsar 技术系列 - 基于 Pulsar 的海量 DB 数据采集和分拣

Pulsar 作为下一代消息中间件的典型代表,在大数据领域、广告、计费等场景已经得到了广泛的应用。本文主要分享 Pulsar 在大数据领域, DB Binlog 增量数据采集、分拣案例中的应用,以及在使用过程中对 Pulsar Java SDK 的使用调优,供大家参考。

2023-11-15 18:16:34 1550

原创 Apache Pulsar 在腾讯云上的最佳实践

本次 Meetup,腾讯云高级工程师林宇强为大家带来了议题为《Apache Pulsar 在腾讯云上的最佳实践》的精彩演讲,接下来的篇幅将从系统架构、设计思路、寻址服务、跨集群迁移、跨地域容灾几个方面详细为大家介绍 Apache Pulsar 在腾讯云上的最佳实践。

2023-11-02 10:35:21 1195

原创 KMS在腾讯云的微服务实践助力其降本50%

KMS 是一家以内容创作和原创 IP 创作为目标的专业厂牌,曾是微软 Azure 的标杆客户,如今已经在腾讯云稳定运行超过2年了。他们在2021年迁移到腾讯云后,通过合理的架构设计和产品使用,让他们成本降低了50%。

2023-10-26 16:52:01 813

原创 腾讯云微服务平台 TSF 异地多活单元化能力重磅升级

2023腾讯全球数字生态大会已于9月7-8日完美落幕,40+专场活动展示了腾讯最新的前沿技术、核心产品、解决方案。微服务与消息队列专场,腾讯云微服务平台 TSF 产品经理张桢带来了《腾讯云微服务平台 TSF 异地多活单元化能力重磅升级》的精彩演讲。本篇文章详细回顾了腾讯云微服务单元化最佳实践。

2023-09-19 10:24:36 747

原创 微服务高可用容灾架构设计

相对于过去单体或 SOA 架构,建设微服务架构所依赖的组件发生了改变,因此分析与设计高可用容灾架构方案的思路也随之改变,本文对微服务架构落地过程中的几种常见容灾高可用方案展开分析。

2023-09-11 14:53:49 698

原创 Apache pulsar 技术系列-- 消息重推的几种方式

Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO replication)、快速扩容、灵活容错等特性。在很多场景下,用户需要通过 MQ 实现消息的重新推送能力,比如超时重推、处理异常时重推等,本文介绍 Apache Pulsar 提供的几种消息重推方案。

2023-07-26 17:24:03 414

原创 Apache Pulsar 技术系列 - GEO replication 中订阅状态的同步原理

Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO Replication)、快速扩容、灵活容错等特性,GEO Replication 可以原生支持数据和订阅状态在多个集群之间进行复制,GEO 目前在 Apache InLong 内部已经有长期稳定的实践,本文主要讲述 GEO 中的订阅状态的同步。

2023-07-25 18:25:15 434

原创 消息队列 CKafka 跨洋数据同步性能优化

本文主要介绍了 CKafka 在跨洋场景中遇到的一个地域间数据同步延时大的问题,跨地域延时问题比较典型,所以详细记录下来做个总结。

2023-07-21 10:30:48 502

原创 微服务优雅上下线的实践方法

微服务优雅上下线的原理是指在微服务的发布过程中,保证服务的稳定性和可用性,避免因为服务的变更而造成流量的中断或错误。微服务优雅上下线的原理可以从三个角度来考虑:服务端的优雅上线,即在服务启动后,等待服务完全就绪后再对外提供服务,或者有一个服务预热的过程。服务端的无损下线,即在服务停止前,先从注册中心注销,拒绝新的请求,等待旧的请求处理完毕后再下线服务。客户端的容灾策略,即在调用服务时,通过负载均衡、重试、黑名单等机制,选择健康的服务实例,避免调用不可用的服务实例。

2023-07-12 18:39:34 1328 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除