pipeline
elasticsearch pipeline 使用
夜月行者
我们一定要活的没有遗憾,有朝一日一定要出海,随心所欲的活着,比谁都要自由!
十年资深程序员,java,vue,python,小程序,app 更多自由项目 https://chenqi1990.site
展开
-
02.pipeline常用processor
感觉ingest是es的一个着力点,因为现在ingest的processor越来越多了。Append Processor: 在一个已经存在的field上增加一些valueBytes Processor: 用于在"b", “kb”, “mb”, “gb”, “tb”, “pb” 之间进行单位换算Convert Processor: 对字段的类型进行转换设置Date Processor: 将原文档中的某个日期字段转换成一个Elasticsearch识别的时间戳字段(一般默认为@timestamp)D原创 2020-10-28 09:48:08 · 1193 阅读 · 0 评论 -
01.ingest pipeline的使用简介
1. ingest的作用在es cluster中每个node都会有分工,比如master,data,ingest等等,这个参考node的功能设置。ingest就是其中的一种。ingest 主要就是对indexing request进行预处理,比如改变某个field的值,添加一两个field,忽略一些有问题的doc等。也可以通过修改index的元数据字段_index来索引到不同的index当中。ingest node的设置方式是在elasticsearch.yml文件中设置node.ingest:原创 2020-10-26 21:29:38 · 8973 阅读 · 2 评论