项目组要设计一套数据监控平台,一下是本人初步设计的技术架构图。各个组件怎么使用请关注后续文章。
消息通过3中方式导入集群:
1、消息解析之后直接通过Client API接口导入ES集群。
2、消息解析存储到文件,存储格式为json、csv等等格式,通过logstash 监控文件收集数据到ES集群。
3、消息解析之后直接通过log4j2的tcp传送到logstash,logstash过滤采样之后导入ES集群。
项目组要设计一套数据监控平台,一下是本人初步设计的技术架构图。各个组件怎么使用请关注后续文章。
消息通过3中方式导入集群:
1、消息解析之后直接通过Client API接口导入ES集群。
2、消息解析存储到文件,存储格式为json、csv等等格式,通过logstash 监控文件收集数据到ES集群。
3、消息解析之后直接通过log4j2的tcp传送到logstash,logstash过滤采样之后导入ES集群。