- 博客(2)
- 收藏
- 关注
RSS订阅
原创 从零到日志采集索引可视化、监控报警、rpc trace跟踪-系统上下线监控
之前说到注册中心的设计，zookeeper中的节点部署如下：kafkaAppender初始化向zk进行app节点注册，并写入相关的信息kafkaAppender发生异常暂停工作会向app节点写入相关信息，以便监控系统能够实时感知并发送报警app正常或者异常退出后，zk中的app临时节点会消失，shutdownhook会正常运行，监控系统能够实时感知并发送报警（这里就需要我们在自定义的log
2017-02-16 15:49:22
2204
4
原创 从零到日志采集索引可视化、监控报警、rpc trace跟踪-日志索引
之前说到日志事件的设计、如何埋点以及基于jvm的程序如何对接我们的系统，接下去我们说下日志如何进行索引。通过前三篇博客可以知道数据通过LOGGER.info等打印日志的函数就可以存入kafka，所以我们对日志建立索引只需要实时读kafka写入es，为了提高实时索引的速率，我们会部署3个实例实时消费kafka的9个partition，并且使用es的bulk load api，这样测试下来大概3台
2017-02-07 10:00:30
1790
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人