Kafka选型 操作系统、磁盘、磁盘容量、宽带

1.操作系统选型

I/O 模型的使用

    阻塞式 I/O、非阻塞式 I/O、I/O 多路复用、信号驱动
    I/O 和异步 I/O。每种 I/O 模型都有各自典型的使用场景,比如 Java 中 Socket 对象的阻塞模式和非阻塞模式就对应于前两种模型;而 Linux 中的系统调用 select 函数就属于 I/O多路复用模型;大名鼎鼎的 epoll 系统调用则介于第三种和第四种模型之间;至于第五种模型,其实很少有 Linux 系统支持,反而是 Windows 系统提供了一个叫 IOCP 线程模型属于这一种。
    你不必详细了解每一种模型的实现细节,通常情况下我们认为后一种模型会比前一种模型要高级,比如 epoll 就比 select 要好,了解到这一程度应该足以应付我们下面的内容了。
    说了这么多,I/O 模型与 Kafka 的关系又是什么呢?实际上 Kafka 客户端底层使用了 Java的 selector,selector 在 Linux 上的实现机制是 epoll,而在 Windows 平台上的实现机制是 select。因此在这一点上将 Kafka 部署在 Linux 上是有优势的,因为能够获得更高效的
I/O 性能。

数据网络传输效率

    在 Linux 部署 Kafka 能够享受到零拷贝技术所带来的
快速数据传输特性。

社区支持度

    Windows 平台上部署 Kafka 只适合于个人测试或用于功能验证,
千万不要应用于生产环境。

2.磁盘选型

    关于磁盘选择另一个经常讨论的话题就是到底是否应该使用磁盘阵列(RAID)。使用
RAID 的两个主要优势在于:
        提供冗余的磁盘存储空间
        提供负载均衡

对于kafka来说这都有实现,不太重要

3.磁盘容量大小

根据消息数和预留时间估计磁盘大小,建议预留磁盘使用量的百分之30%

4.宽带大小

为了防止大量丢包的问题,需要巨大的宽带网络,单机在700Mbps左右

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

一只小小狗

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值