Golang之NSQ

1 NSQ概述

1.1 NSQ简介

NSQ是一个基于go语言开发的一个比较流行的分布式的消息队列。

1.2 NSQ优势

• 不存在单点故障，容错性能高以及高可用性，可靠的消息交付
• 支持横向扩展，没有集中式代理
• 配置和部署简单

1.2.1 NSQ适用于异步处理

参照下图利用消息队列把业务流程中的非关键流程异步化，从而显著降低业务请求的响应时间。

1.2.2 NSQ适用于应用解耦

通过使用消息队列将不同的业务逻辑解耦，降低系统间的耦合，提高系统的健壮性。后续有其他业务要使用订单数据可直接订阅消息队列，提高系统的灵活性。

1.2.2 NSQ适用于流量缓冲

类似秒杀（大秒）等场景下，某一时间可能会产生大量的请求，使用消息队列能够为后端处理请求提供一定的缓冲区，保证后端服务的稳定性。

2 NSQ的组件

nsqlookupd

管理nsqd节点拓扑信息并提供最终一致性的发现服务的守护进程。
nsqlookupd是维护所有nsqd状态、提供服务发现的守护进程。它能为消费者查找特定topic下的nsqd提供了运行时的自动发现服务。 它不维持持久状态，也不需要与任何其他nsqlookupd实例协调以满足查询。因此根据你系统的冗余要求尽可能多地部署nsqlookupd节点。它们小豪的资源很少，可以与其他服务共存。我们的建议是为每个数据中心运行至少3个集群。

nsqd

负责接收、排队、转发消息到客户端的守护进程。它可以独立运行，并且定时向nsqlookupd服务发送心跳。

启动nsqd，指定-broadcast-address=127.0.0.1来配置广播地址：

./nsqd -broadcast-address=127.0.0.1

如果是在搭配nsqlookupd使用的模式下需要还指定nsqlookupd地址:

./nsqd -broadcast-address=127.0.0.1 -lookupd-tcp-address=127.0.0.1:4160

如果是部署了多个nsqlookupd节点的集群，那还可以指定多个-lookupd-tcp-address。

nsqadmin

nsq的web统计界面，可实时查看集群的统计数据和执行一些管理任务。
一个实时监控集群状态、执行各种管理任务的Web管理平台。 启动nsqadmin，指定nsqlookupd地址:

./nsqadmin -lookupd-http-address=127.0.0.1:4161

使用浏览器打开http://127.0.0.1:4271访问管理界面。

3 NSQ架构

3.1 topic和channel

每个nsqd实例旨在一次处理多个数据流。这些数据流称为“topics”，一个topic具有1个或多个“channels”。每个channel都会收到topic所有消息的副本，实际上下游的服务是通过对应的channel来消费topic消息。

topic和channel不是预先配置的。topic在首次使用时创建，方法是将其发布到指定topic，或者订阅指定topic上的channel。channel是通过订阅指定的channel在第一次使用时创建的。

topic和channel都相互独立地缓冲数据，防止缓慢的消费者导致其他channel的积压（同样适用于topic级别）。

channel可以并且通常会连接多个客户端。假设所有连接的客户端都处于准备接收消息的状态，则每条消息将被传递到随机客户端。例如：