PB级规模数据的Elasticsearch统一日志存储冷热分离原理和实践

PB级规模数据的Elasticsearch统一日志存储冷热分离原理和实践

一、目标

最近在做公司的全量日志收集和检索，需要统一公司各个业务线常用的应用业务日志，统一存储，统一查看，统一前端UI组件，保障查询，写入性能，降低重复开发成本。这里提供一些项目中的心得和性能优化的解决方案。

一、参考文章

1. elastic官方指导手册: link.
2. 阿里云pb级日志数据分库分表实践: link.
3. 阿里云冷热节点数据迁移方案: link.
4. 自定义路由的应用: link.

二、名词释义

• 索引:link.
• 节点: