- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 理解Apache kafka 的设计元素和原则(一)
前言 本文参考apachekafka文档提炼精要所写,英文好的同学可以直接从文末的参考文档传送至官方文档。 设计思路 kafka的设计开发致力于提供一个处理各种大型实时数据流的统一平台。正因如此,它需要满足一些特性: 具备高吞吐量以支持高容量的事件流如实时日志 可以优雅的处理大数据积压以支持离线系统的定期数据加载 能够处理低延迟交互以满足传统消息应用场景 支持分区、分布式和实时处理出...
2018-04-09 16:41:29 329
原创 基本分页存储方式
基本分页存储方式 使用kafka的过程对kafka的存储产生了疑惑,又引出了对分页存储的疑惑,对此,对今日分页存储的理解做简要记录 为什么要分页存储 在内存的分配过程中,连续分配方式容易产生大量的碎片,虽然可以通过“紧凑”对其进行整理,但是这样需要大量的开销。 因此,如果能够在进程的内存分配的时候,将连续的逻辑内存打散分配在多个可以不相连的物理内存上,那么将会利用到原来被浪费的大块碎片,降...
2018-04-06 20:48:48 4545 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人