对于日志收集统计分析方案现在主流的有ELK redis kafka flume +大数据平台，ELK我们以后再介绍，这里先简单介绍下rsyslog对接kafka

kafka中的术语

  • Broker

    Kafka集群包含一个或多个服务器，这种服务器被称为broker

  • Topic

    每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic。（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）

  • Partition

    Parition是物理上的概念，每个Topic包含一个或多个Partition.

  • Producer

    负责发布消息到Kafka broker

  • Consumer

    消息消费者，向Kafka broker读取消息的客户端。