![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
logstash
水的精神
一件事,要么不做,要么做到极致。
展开
-
如何在使用logstash导出的时候,包含索引名称和_id
我还需要把原来数据中的_id保存下来,在新的集群中导入的时候,指定_id。这里,我的需求是,把es中的数据导出到本地文件中,一行一个json。logstash配置文件如下。这里有一个配置文件!原创 2023-12-25 19:14:41 · 516 阅读 · 0 评论 -
数据从A集群,使用logstash迁移到B集群,如何保持_Id一致
有时候,我们在跨集群数据同步的时候,需要保持_id一致。这里直接给出一个配置文件。原创 2023-12-25 19:09:35 · 422 阅读 · 0 评论 -
logstash 和 beats的关系
logstash和beats的关系好多人都觉得beats出来是用来替代logstash的。实际上并不是,beats只是用来优化logstash的,因为logstash消耗的性能比较多。如果只是单纯的为了收集日志,使用logstash就有点大材小用了,另外有点浪费资源。而beats是轻量级的用来收集日志的。而logstash更加专注一件事,那就是数据转换,格式化,等处理工作。比方说,日志数据是一行一行的非格式化的数据,想要存在elasticsearch就要有一定的结构。logstash就可以...原创 2020-12-08 14:52:02 · 5024 阅读 · 0 评论