es7自动添加时间戳

最新推荐文章于 2024-05-17 14:24:22 发布

TreeCode

最新推荐文章于 2024-05-17 14:24:22 发布

阅读量9.8k

点赞数 2

分类专栏： es 文章标签： elasticsearch

本文链接：https://blog.csdn.net/TreeCode/article/details/114678821

版权

es 专栏收录该内容

20 篇文章 2 订阅

订阅专栏

需求：根据时间提取es数据
解决：为es的记录添加时间戳
方法：
es5.0以前的版本使用的是@time_stamp方式来给document的每一条记录添加时间戳，

"properties": {
         "@timestamp":{
                   "format":"strict_date_optional_time||epoch_millis",
                   "type":"date",
                   "enabled":true
         }
}

es5.0以后，这种方式就被放弃了，到目前为止（最新7.12），es采用的是pipeline的方式来自动添加时间戳：

配置时间戳pipeline

PUT _ingest/pipeline/my_timestamp_pipeline
{
  "description": "Adds a field to a document with the time of ingestion",
  "processors": [
    {
      "set": {
        "field": "ingest_timestamp",
        "value": "{{_ingest.timestamp}}"
      }
    }
  ]
}

创建索引时使用时间戳pipeline

PUT my_index
{
  "settings": {
    "default_pipeline": "my_timestamp_pipeline"
  }
}

创建数据验证：


PUT my_index/_doc/1
{
  "content": "it is cool!"
}

结果：注意这里的时间时标准时间，不是东八区的时间。


{
  "_index" : "my_index",
  "_type" : "_doc",
  "_id" : "1",
  "_version" : 1,
  "found" : true,
  "_source" : {
    "content" : "it is cool!",
    "ingest_timestamp" : "2021-03-11T12:39:09.921Z"
  }
}