现场填坑系列:使用bulk操作提高性能,解决mongoshake 向ES同步延迟。
接到现场报告,MongoDB向ES同步数据延迟越来越大,有的已经超过10个小时,造成客户新加入的用户无法被搜索出来。由于在系统中ES类似于数仓,很多统计和第三方接系统都需要从ES获取数据,所以也影响了一些其他依赖ES数据的功能和业务。
架构简图
tomcat------日志数据----->logstash-------日志数据--->| E S
mongodb---业...
原创
2020-03-27 18:34:30 ·
1431 阅读 ·
0 评论