- 博客(2)
- 收藏
- 关注
原创 从零到日志采集索引可视化、监控报警、rpc trace跟踪-系统上下线监控
之前说到注册中心的设计,zookeeper中的节点部署如下:kafkaAppender初始化向zk进行app节点注册,并写入相关的信息kafkaAppender发生异常暂停工作会向app节点写入相关信息,以便监控系统能够实时感知并发送报警app正常或者异常退出后,zk中的app临时节点会消失,shutdownhook会正常运行,监控系统能够实时感知并发送报警(这里就需要我们在自定义的log
2017-02-16 15:49:22 2207 4
原创 从零到日志采集索引可视化、监控报警、rpc trace跟踪-日志索引
之前说到日志事件的设计、如何埋点以及基于jvm的程序如何对接我们的系统,接下去我们说下日志如何进行索引。通过前三篇博客可以知道数据通过LOGGER.info等打印日志的函数就可以存入kafka,所以我们对日志建立索引只需要实时读kafka写入es,为了提高实时索引的速率,我们会部署3个实例实时消费kafka的9个partition,并且使用es的bulk load api,这样测试下来大概3台
2017-02-07 10:00:30 1790 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人