8.24 构建TB级异步消息系统(Kafka)

Kafka是最好性能的消息队列服务器,它能够处理TB级的消息。

而这个社交网站的系统需要发送消息,具体地:当一个用户给你进行点赞、评论时,系统会自动告诉谁评论了你。。。

这里的消息是服务器自动给某些人发送得“系统通知”。这些功能的触发频率很高,使用性能较好的kafka去发消息。

1.1引言:阻塞队列

BlockingQueue接口

-主要用于解决线程通信的问题

-阻塞方法:put 、take

实现类:

ArrayBlockingQueue

LinkedBlockingQueue

PriorityBlockingQueue、SyschronousQueue、DelayQueue等

2.0安装Kafka

在官网下载kafka

https://kafka.apache.org/downloads

(一)首先配置:kafka里面的zookeeper的配置文件config

(1)、zookeeper

默认:

windows:需要修改dataDir为windows系统下的文件目录

(2)server.properties

 windows:

 

Kafka启动流程

(一)首先需要启动Zookeeper

windows 下:以config\zookeeper.properties启动zookeeper

启动命令:

1、启动zookeeper:

在Kafka安装目录下,运行bin/windows/zookeeper-server-start.bat  config/zookeeper.properties

必须在与config同级目录下的bin目录开始启动zookeeper,并非是直接在bin目录里面启动。。。

https://www.codenong.com/cs106283443/

遇到的问题:启动zookeeper时说输入行太长

解决方法:将kafka所有文件放入其他驱动器,如d:或e:并运行命令

 zookeeper成功启动

(二)、  kafka成功启动

同样的是,必须在开始在bin目录下启动kafka软件。

bin\windows\kafka-server-start.bat config\server.properties.​​​​​​​

 (三)、使用Kafka创建一个主题Topic(其一代表一个位置、其二代表一个类型)

--create 表示:创建主题

--bootstrap-server 表示:在默认服务器9092上传创建主题,1个副本,1一个分区,topic名称是test

 (四)、主题创建好后,以生产者的身份向该主题发送消息,调用生产者

--broker-list localhost:9092  表示:往9092服务器的上的test的topic发送消息

 

 生产者就在这里阻塞住了,等待发送更多的消息。

 (四)、再以消费者的身份向该主题读取该消息,调用消费者

 生产者能够阻塞住,实时地输入数据,而消费者可以实时地更新生产者发送的数据

2.1、Spring整合Kafka

2.2、为什么要用Kafka? 

因为“发布通知”的这个操作是非常频繁得,用户群体很庞大。所以为了考虑性能问题,就要采取消息队列进行性能的提升。。。

从业务的角度上,使用“事件驱动”的方式,“评论”是一个事件、“点赞”是一个事件、“关注”是一个事件。解决问题是以“事件”为主体。

定义事件对象。。。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值