java统一日志收集_有哪些免费轻量级的适用于日志收集与展现的服务框架?

采集是采集,展现是展现(其实还要有个存储),很少有混在一起的。

拿 ELK 举例子也是 L 搜集、E 存储、K 展现。

轻量级的采集器倒是多的去,Logagent、Filebeat、Flume,甚至你把 ELK 里的 Logstash 单拿出来,哪个都不重。

最关键的是存储,你要不要全文搜索?要不要模糊搜索?有没有复杂的关联、分组、排序需要?对性能和实时性有没有需要、还说说设个查询条件等半小时后再出报告也可以接受?

如果有,那么可选的其实不多,占据绝大部分市场的就是 ELK 里的 ElasticSearch 了,剩下再就还有 Solr、LinkedIn Sensei 之类的选择,Solr 因为出来的早所以还有一定市场,LinkedIn Sensei 这玩意儿你想找中文资料都没有。

如果没有上述几点需要,那 MongoDB 甚至普通的关系型数据库都够了,但从你问题描述里看你们最大的问题是日志格式不统一,那要用关系型数据库的第一步你们就得想办法统一格式(如果各个服务层不好做,你可以抽一个中间层出来,接收各个服务发来的不同的日志再格式化成统一格式)才好建表啊。

最后是展现,其实从你描述看你们用不用 ELK 里的 Kibana 都行,Kibana 主要胜在数据可视化,比如根据 nginx 访问日志生成最近一个月流量分布图之类的需求,与 Grafana 是同类产品。如果你们只是纯文本展示,那么没必要用 Kibana,自己写个 Web 页面、封装好几个查询语句就好了。

自己搭建嫌费劲,就买云服务,国内这些主流公有云厂商都有日志云服务。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值