日志分析系统架构

架构图参考饿了么业务分析系统，参考链接：https://mp.weixin.qq.com/s/OlymUeojtcVrPm5xUJQyXg
在对方的图上做了进一步的改进。ES并不适合长期存储数据，索引越多后面遇到的瓶颈越多。所以把ES做为一个准实时的存储，同时在ES上进一步发掘有问题的数据，采用开源的elastalert。mysql 用来作为soc的存储引擎，存储所有的事件，等等平台相关的东西。暂定这个样子。
这个架构只是业务分析系统的架构，事实上更全面一点机器学习和对ES的规则匹配到的东西是要反哺给我们的WAF,这才是完整的架构。