
日请求70亿高并发大数据项目实战专栏
文章平均质量分 94
分享日均70亿级java真实项目,运用各种大数据工具,涵盖了java基础框架Springcloud,zookeeper,kafka,dubbo,nacos,k8s,jenkins,datahub,MaxCompute,redis,域名,网关等等,均是真实项目实战经验
码农阿豪@新空间
滴水穿石,毅力成就非凡,持之以恒,成功指日可待。
商务合作请联系工作室微信15279484656;
需要技术交流,面试分享,工作吐槽,答疑解惑,可加我进群唠嗑,里面都是各行程序员大佬
展开
-
Kafka 核心 API 全解析
Producer API 和 Consumer API 是 Kafka 数据流的入口和出口,适合开发基础的生产和消费应用。Streams API 提供了流式数据处理能力,适合构建实时流处理应用。Connect API 使得 Kafka 能够无缝集成到企业现有的生态系统中。Admin API 是 Kafka 管理与运维的必备工具。随着 Apache Kafka 的持续发展,这些 API 将不断增强,为开发者提供更便捷的工具。翻译 2024-12-28 19:12:53 · 10365 阅读 · 4 评论 -
【翻译】Kafka快速入门
Kafka 可以使用 KRaft 模式运行,使用本地脚本和下载的文件或 Docker 镜像。按照下面的一个部分来启动 Kafka 服务器,但不要同时执行两个部分。默认情况下,您输入的每一行都将导致将一个单独的事件写入主题。一旦所有的服务都成功启动,你就有了一个基本的 Kafka 环境,可以运行并准备使用了。一旦 Kafka 服务器成功启动,你将有一个基本的 Kafka 环境运行并准备使用。尝试更多操作:切换回生产者终端写入额外的事件,并观察消费者终端中的实时变化。启动 Kafka Docker 容器。翻译 2024-12-28 19:10:27 · 10329 阅读 · 1 评论 -
【kafka官网翻译】深入理解 Kafka 主题级别配置
Kafka 的主题级别配置允许用户为每个主题设置特定的参数,从而覆盖服务器的默认配置。这些配置可以在创建主题时指定,也可以在主题创建后动态修改。通过主题级别配置,用户可以根据业务需求灵活调整主题的行为,例如消息保留策略、压缩方式、日志清理策略等。Kafka 的主题级别配置为用户提供了强大的灵活性,使其能够根据具体需求优化主题的行为。通过合理配置等参数,用户可以显著提升 Kafka 的性能和可靠性。在实际应用中,建议根据业务场景和数据特性选择合适的配置,并通过命令行工具动态调整配置以满足不断变化的需求。翻译 2025-01-04 23:43:48 · 5439 阅读 · 0 评论 -
【kafka官网翻译】Kafka 主题级别配置的高级特性与最佳实践
Kafka 的主题级别配置提供了丰富的高级特性,如日志压缩、副本管理和消息时间戳控制。通过合理配置这些参数,用户可以进一步提升 Kafka 的性能、可靠性和灵活性。在实际应用中,建议根据业务需求和数据特性选择最佳配置,并结合命令行工具动态调整配置以满足不断变化的需求。翻译 2025-01-05 09:30:00 · 5446 阅读 · 0 评论 -
Kafka Broker配置详解:优化与最佳实践
Kafka的配置选项非常丰富,正确的配置对于确保集群的性能和稳定性至关重要。本文详细介绍了Kafka Broker的配置,从基础到高级,希望能够帮助您更好地理解和优化您的Kafka集群。通过合理配置,您可以提高Kafka集群的性能、安全性和稳定性。原创 2024-12-31 07:30:00 · 13911 阅读 · 57 评论 -
Kafka 新的消费组默认的偏移量设置和消费行为
Kafka 新的消费组默认的偏移量设置和消费行为原创 2024-06-19 17:28:54 · 52205 阅读 · 6 评论 -
为什么我的topic总共有15个分区,但是每单个服务里面看都只有11个分区
通过上述方法,可以更好地理解和管理Kafka集群中的分区分布,从而解决分区数量显示不一致的问题。原创 2024-06-19 08:00:00 · 48082 阅读 · 8 评论 -
查询Kafka集群中消费组(group)信息和对应topic的消费情况
通过上述方法,可以方便地查询Kafka集群中的消费组信息和topic的消费情况,从而更好地管理和监控Kafka集群的运行状态。希望这篇博客对你有所帮助!如果有更多问题,欢迎留言讨论。原创 2024-06-18 10:35:13 · 49122 阅读 · 8 评论 -
《日均70亿请求项目实战》之部署三台zookeeper集群
《日均70亿请求项目实战》之部署三台zookeeper集群原创 2024-06-06 21:51:04 · 39272 阅读 · 10 评论