1.什么是kafka
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据
2.kafka的作用
解辑:在项目启动之初来预测将来会碰到什么需求是极其困难的。消息中间件在处理过程 中间插入了一个隐含的、基于数据的接口层,两边的处理过程都要实现这一接口,这允许你独 立地扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束即可
冗余〈存储) 有些情况下,处理数据的过程会失败。消息中间件可以把数据进行持久化直 到它们已经被完全处理,通过这一方式规避了数据丢失风险。在把 个消息从消息中间件中删 除之前,需要你的处理系统明确地指出该消息己经被处理完成,从而确保你的数据被安全地保 存直到你使用完毕。
扩展性: 因为消息中间件解捐了应用的处理过程,所以提高消息入队和处理的效率是很容 易的,只要另外增加处理过程即可,不需要改变代码,也不需要调节参数。
削峰: 在访问量剧增的情况下,应用仍然需要继续发挥作用,但是这样的突发流 并不常 见。如果以能处理这类峰值为标准而投入资源,无疑是巨大的浪费 使用消息中间件能够使关 键组件支撑突发访问压力,不会因为突发的超负荷请求而完全崩惯
可恢复性: 当系统一部分组件失效时,不会影响到整个系统 消息中间件降低了进程间的 稿合度,所以即使 个处理消息的进程挂掉,加入消息中间件中的消息仍然可以在系统恢复后 进行处理
顺序保证: 在大多数使用场景下,数据处理的顺序很重要,大部分消息中间件支持 定程 度上的顺序性。
缓冲: 在任何重要的系统中,都会存在需要不同处理时间的元素。消息中间件通过 个缓 冲层来帮助任务最高效率地执行,写入消息中间件的处理会尽可能快速 该缓冲层有助于控制 和优化数据流经过系统的速度。
异步通信: 在很多时候应用不想也不需要立即处理消息 消息中间件提供了异步处理机制, 允许应用把 些消息放入消息中间件中,但并不立即处理它,在之后需要的时候再慢慢处理
3.kafka下载
https://www.apache.org/dist/kafka/
当前最新稳定版为2.3.0
下载后解压
3.kafka安装
安装文章https://blog.csdn.net/qq_34874784/article/details/97891242