Kibana: 如何在 Kibana 中生成 Scripted fields

Elastic 中国社区官方博客

于 2019-11-29 11:49:35 发布

阅读量6k

点赞数

分类专栏： Elastic Kibana 文章标签： elasticsearch 大数据数据库

本文为博主原创文章，未经博主允许不得转载。

本文链接：https://blog.csdn.net/UbuntuTouch/article/details/103306261

版权

Elastic 同时被 2 个专栏收录

1496 篇文章 904 订阅

订阅专栏

Kibana

167 篇文章 177 订阅

订阅专栏

如果细心的读者阅读过我之前的文章 “Elasticsearch：aggregation 介绍”，就会发现在我之前的例子中，我有用到 Script 来生成一个 field，并对这个 field 进行聚合统计。当时是这样做的：

GET sports/_search
{
  "size": 0,
  "aggs": {
    "age_range": {
      "range": {
        "script": {
          "source": 
            """
            def dob = doc['birthdate'].value;
            return params.now - dob.getYear()
            """
            ,
          "params": {
            "now": 2019
          }
        },
        "ranges": [
          {
            "from": 30,
            "to": 31
          }
        ]
      }
    }
  }
}

那么我们可以在 Kibana 中做同样的事吗？

答案是肯定的。在今天的文章中，我将来介绍如何在 Kibana 中使用 Script 来生产一个 field，并对这个 field 进行统计。

什么是 Scripted Field?

Scripted Field 用中文讲就是脚本字段。它是基于脚本即时计算值

在查询时计算的值，但未编制索引
可能会占用大量资源，并且会影响 Kibana 的效果
没有验证
Buggy 脚本将生成异常
可以使用 “Painless” 或者 “Luncene 表达式” 来写脚本

我们可以参考如下的链接：

下面我们还是使用一个具体的例子来讲述 Scripted Fields。

准备数据

为了能够展现如何生产 Scripted Filed，我们先使用如下的一个基本的数据。在 Kibana 中输入如下的数据：

POST _bulk
{ "index" : { "_index" : "twitter", "_id": 1} }
{"user":"张三","message":"今儿天气不错啊，出去转转去","uid":2,"city":"北京","province":"北京","country":"中国","address":"中国北京市海淀区","location":{"lat":"39.970718","lon":"116.325747"}, "DOB":"1980-12-01"}
{ "index" : { "_index" : "twitter", "_id": 2 }}
{"user":"老刘","message":"出发，下一站云南！","uid":3,"city":"北京","province":"北京","country":"中国","address":"中国北京市东城区台基厂三条3号","location":{"lat":"39.904313","lon":"116.412754"}, "DOB":"1981-12-01"}
{ "index" : { "_index" : "twitter", "_id": 3} }
{"user":"李四","message":"happy birthday!","uid":4,"city":"北京","province":"北京","country":"中国","address":"中国北京市东城区","location":{"lat":"39.893801","lon":"116.408986"}, "DOB":"1982-12-01"}
{ "index" : { "_index" : "twitter", "_id": 4} }
{"user":"老贾","message":"123,gogogo","uid":5,"city":"北京","province":"北京","country":"中国","address":"中国北京市朝阳区建国门","location":{"lat":"39.718256","lon":"116.367910"}, "DOB":"1983-12-01"}
{ "index" : { "_index" : "twitter", "_id": 5} }
{"user":"老王","message":"Happy BirthDay My Friend!","uid":6,"city":"北京","province":"北京","country":"中国","address":"中国北京市朝阳区国贸","location":{"lat":"39.918256","lon":"116.467910"}, "DOB":"1984-12-01"}
{ "index" : { "_index" : "twitter", "_id": 6} }
{"user":"老吴","message":"好友来了都今天我生日，好友来了,什么 birthday happy 就成!","uid":7,"city":"上海","province":"上海","country":"中国","address":"中国上海市闵行区","location":{"lat":"31.175927","lon":"121.383328"}, "DOB":"1985-12-01"}

这个 twitter 的 schema 是这样的：

{
  "twitter" : {
    "mappings" : {
      "properties" : {
        "DOB" : {
          "type" : "date"
        },
        "address" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "city" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "country" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "location" : {
          "properties" : {
            "lat" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "lon" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            }
          }
        },
        "message" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "province" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "uid" : {
          "type" : "long"
        },
        "user" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        }
      }
    }
  }
}

我们发现这个 Schema 里含有一个叫做 DOB (date of birth)的字段，但是它没有一个叫做 age 的字段，也就是年龄。我们知道这个年龄字段其实是根据每次查询的时间，会有不同。比如今年查询和明年查询，显然显示的年龄应该会有不同。我们的目标是每次搜索时会自动生产相应的 age。

我们先打开 Kibana，然后点击Management：