ELK高级搜索五之索引管理

已于 2022-05-30 22:56:01 修改
阅读量365 收藏
点赞数
分类专栏： 搜索 文章标签： java 后端
于 2022-04-20 11:38:34 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yangyanping20108/article/details/124293552
版权

创建索引


创建索引的语法

PUT /index
{
    "settings": { 
       "index":{
          "number_of_shards":"3",
          "number_of_replicas":"2"
        }
    },
    "mappings": {
       "dynamic":false,
       "properties" : {
            "field1" : { "type" : "text" },
            "field2" : {"type"  : "integer" }
        }
    },
    "aliases": {
    	"otherName": {}
  } 
}

创建一个新闻索引

创建一个分片数=3，副本数=2 ，别名=news 的新闻索引。

PUT  /article
{
    "settings":{
        "number_of_shards":3,
        "number_of_replicas":2
    },
    "mappings":{
        "dynamic":false,
        "properties":{
            "title":{
                "type":"text",
                "analyzer":"ik_smart",
                "search_analyzer":"ik_max_word"
            },
            "content":{
                "type":"text",
                "analyzer":"ik_smart",
                "search_analyzer":"ik_max_word"
            },
            "categoryName":{
                "type":"keyword"
            },
            "view_count":{
              "type": "integer"
            },
            "publishTime":{
                "type":"date",
                "format":"yyyy-MM-dd HH:mm:ss||yyyy-MM-dd"
            }
        }
    },
    "aliases":{
        "news":{

        }
    }
}

 使用 kibana 插入4条数据

PUT /article/_doc/1
{
    "title":"芯片人才争夺",
    "content":"芯片人才争夺“生猛”,需要大量人才",
    "categoryName":"科技",
    "view_count" : 60,
    "publishTime":"2022-04-19 12:00:00"
}
PUT /article/_doc/2
{
    "title":"2021年我国数字阅读用户规模破5亿 人均电子阅读11.58本",
    "content":"2021年，我国数字阅读用户规模为5.06亿，相比2020年增长了2.49%；人均阅读量电子阅读11.58本，有声阅读7.08本。在首届全民阅读大会数字阅读分论坛暨第八届数字阅读年会上，中国音像与数字出版协会发布发布了《2021年度中国数字阅读报告》，展现了过去一年中国数字阅读行业发展情况与特点",
    "categoryName":"科技",
    "view_count" : 80,
    "publishTime":"2022-04-26 12:00:00"
}
PUT /article/_doc/3
{
    "title":"徙的鸟死于城市灯光，气象雷达如何拯救它们",
    "content":"城市灯光会吸引迁徙的鸟类，并产生致死的后果。发表在4月21日《科学》杂志上的一篇文章，讲述了美国的鸟类学家如何利用气象雷达和建模，降低人造灯光影响下的鸟类死亡率",
    "categoryName":"科技",
    "view_count":70,
    "publishTime":"2022-04-26 12:00:00"
}
PUT /article/_doc/4
{
    "title":"季度动力电池装机量排行榜",
    "content":"在汽车电动化时代，中国领跑全球；而在汽车动力电池领域，中国的宁德时代继续领跑全球",
    "categoryName":"汽车",
    "view_count" : 50,
    "publishTime":"2022-04-26 12:00:00"
}

简单查询语法

  • GET /<target>/_search

  • GET /_search

  • POST /<target>/_search

  • POST /_search

 根据ID查询

GET /article/_doc/1

-- 输出内容
{
  "_index" : "article",
  "_type" : "_doc",
  "_id" : "1",
  "_version" : 1,
  "_seq_no" : 0,
  "_primary_term" : 1,
  "found" : true,
  "_source" : {
    "title" : "芯片人才争夺",
    "content" : "芯片人才争夺“生猛”,需要大量人才",
    "categoryName" : "科技",
    "view_count" : 60,
    "publishTime" : "2022-04-19 12:00:00"
  }
}

使用别名查询

GET /news/_doc/1

--输出内容
{
  "_index" : "article",
  "_type" : "_doc",
  "_id" : "1",
  "_version" : 1,
  "_seq_no" : 0,
  "_primary_term" : 1,
  "found" : true,
  "_source" : {
    "title" : "芯片人才争夺",
    "content" : "芯片人才争夺“生猛”,需要大量人才",
    "categoryName" : "科技",
    "view_count" : 60,
    "publishTime" : "2022-04-19 12:00:00"
  }
}

无条件搜索所有

GET /news/_search

{
  "took" : 60,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 4,
      "relation" : "eq"
    },
    "max_score" : 1.0,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "2",
        "_score" : 1.0,
        "_source" : {
          "title" : "2021年我国数字阅读用户规模破5亿 人均电子阅读11.58本",
          "content" : "2021年，我国数字阅读用户规模为5.06亿，相比2020年增长了2.49%；人均阅读量电子阅读11.58本，有声阅读7.08本。在首届全民阅读大会数字阅读分论坛暨第八届数字阅读年会上，中国音像与数字出版协会发布发布了《2021年度中国数字阅读报告》，展现了过去一年中国数字阅读行业发展情况与特点",
          "categoryName" : "科技",
          "view_count" : 80,
          "publishTime" : "2022-04-26 12:00:00"
        }
      },
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "3",
        "_score" : 1.0,
        "_source" : {
          "title" : "徙的鸟死于城市灯光，气象雷达如何拯救它们",
          "content" : "城市灯光会吸引迁徙的鸟类，并产生致死的后果。发表在4月21日《科学》杂志上的一篇文章，讲述了美国的鸟类学家如何利用气象雷达和建模，降低人造灯光影响下的鸟类死亡率",
          "categoryName" : "科技",
          "view_count" : 70,
          "publishTime" : "2022-04-26 12:00:00"
        }
      },
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "4",
        "_score" : 1.0,
        "_source" : {
          "title" : "季度动力电池装机量排行榜",
          "content" : "在汽车电动化时代，中国领跑全球；而在汽车动力电池领域，中国的宁德时代继续领跑全球",
          "categoryName" : "汽车",
          "view_count" : 50,
          "publishTime" : "2022-04-26 12:00:00"
        }
      },
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 1.0,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        }
      }
    ]
  }
}
字段描述
took耗费了几毫秒
timed_out是否超时，这里是没有
_shards数据拆成3个分片，对于搜索请求，会打到所有的primary shard（或者是它的某个replica shard也可以），所以total和successful会是3；
hits查询的所有结果
hits.total查询结果的数量（多少个 document）
hits.max_scorescore的含义就是document对于一个search的相关度的匹配分数，越相关、就越匹配，分数也越高；
hits.hits（hits里面包含了hits）包含了匹配搜索的document的详细数据-----里面的hits包含的是和每个文档相关的数据，外面的hits有的数据是统计数据，如total等--------一般都有两个hits嵌套
_index该文档所属的index
_type该文档所属的type
_id该文档的id
_source具体的内容，即存储的json串

传参

与http请求传参类似

GET /news/_search?q=title:人才&sort=publishTime:desc
{
  "took" : 48,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 1,
      "relation" : "eq"
    },
    "max_score" : null,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : null,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        },
        "sort" : [
          1650369600000
        ]
      }
    ]
  }
}

 分页查询

GET /news/_search?from=1&size=2
{
  "took" : 45,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 4,
      "relation" : "eq"
    },
    "max_score" : 1.0,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "3",
        "_score" : 1.0,
        "_source" : {
          "title" : "徙的鸟死于城市灯光，气象雷达如何拯救它们",
          "content" : "城市灯光会吸引迁徙的鸟类，并产生致死的后果。发表在4月21日《科学》杂志上的一篇文章，讲述了美国的鸟类学家如何利用气象雷达和建模，降低人造灯光影响下的鸟类死亡率",
          "categoryName" : "科技",
          "view_count" : 70,
          "publishTime" : "2022-04-26 12:00:00"
        }
      },
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "4",
        "_score" : 1.0,
        "_source" : {
          "title" : "季度动力电池装机量排行榜",
          "content" : "在汽车电动化时代，中国领跑全球；而在汽车动力电池领域，中国的宁德时代继续领跑全球",
          "categoryName" : "汽车",
          "view_count" : 50,
          "publishTime" : "2022-04-26 12:00:00"
        }
      }
    ]
  }
}

query DSL入门

query基本匹配查询关键字说明

关键字说明
 match_all查询简单的 匹配所有文档。在没有指定查询方式时，它是默认的查询
match用于全文搜索或者精确查询，如果在一个精确值的字段上使用它， 例如数字、日期、布尔或者一个 not_analyzed 字符串字段，那么它将会精确匹配给定的值
range查询找出那些落在指定区间内的数字或者时间 gt 大于；gte 大于等于；lt 小于；lte 小于等于
term被用于精确值 匹配
termsterms 查询和 term 查询一样，但它允许你指定多值进行匹配
exists查找那些指定字段中有值的文档
missing查找那些指定字段中无值的文档
must多组合查询 必须匹配这些条件才能被包含进来
must_not多组合查询 必须不匹配这些条件才能被包含进来
should多组合查询 如果满足这些语句中的任意语句，将增加 _score ，否则，无任何影响。它们主要用于修正每个文档的相关性得分
filter多组合查询 这些语句对评分没有贡献，只是根据过滤标准来排除或包含文档

查询全部 GET /book/_search

POST localhost:9200/news/_search
{
    "query":{
        "match_all":{

        }
    }
}

{
    "took": 2,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 1,
        "hits": [
            {
                "_index": "article",
                "_type": "_doc",
                "_id": "1",
                "_score": 1,
                "_source": {
                    "title": "芯片人才争夺",
                    "content": "芯片人才争夺“生猛”,需要大量人才",
                    "publishTime": "2022-04-19 12:00:00"
                }
            }
        ]
    }
}

查询指定条件

GET /news/_search
{
  "query": {
    "match": {
      "title": "人才"
    }
  }
}

--输出
{
  "took" : 30,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 1,
      "relation" : "eq"
    },
    "max_score" : 0.2876821,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 0.2876821,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        }
      }
    ]
  }
}

排序查询

GET /news/_search
{
  "query": {
    "match": {
      "title": "人才"
    }
  },
  "sort": [
    {
      "view_count": {
        "order": "desc"
      }
    }
  ],
  "from": 0,
  "size": 2
}


--输出
{
  "took" : 45,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 1,
      "relation" : "eq"
    },
    "max_score" : null,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : null,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        },
        "sort" : [
          60
        ]
      }
    ]
  }
}

term不分词查询

value值部分会作为整体被查询, 不会被分词, 与match做区分, match的value是会被分词作匹配查询的

GET /news/_search
{
  "query": {
    "term": {
      "title": {
        "value": "芯片人才"
      }
    }
  }
}

--输出
{
  "took" : 1,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 0,
      "relation" : "eq"
    },
    "max_score" : null,
    "hits" : [ ]
  }
}

match_phrase

//title中 "芯片", "人才" 会做精准匹配, 都全部含有这两个短语的文档才会被检索出来
GET /news/_search
{
  "query": {
    "match_phrase": {
      "title": "芯片人才"
    }
  }
}

bool多条件复合查询

bool查询的使用:
Bool查询对应Lucene中的BooleanQuery，它由一个或者多个子句组成，每个子句都有特定的类型。

must

 用于全文搜索或者精确查询，如果在一个精确值的字段上使用它， 例如数字、日期、布尔或者一个 not_analyzed 字符串字段，那么它将会精确匹配给定的值。返回的文档必须满足must子句的条件，并且参与计算分值

GET /news/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
          "title": "人才"
          }
        },
        {
          "match": {
            "content": "人才"
          }
        },{
          "range": {
            "view_count": {
              "gte": 50,
              "lte": 60
            }
          }
        }
      ]
    }
  }
}


-- 输出
{
  "took" : 17,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 1,
      "relation" : "eq"
    },
    "max_score" : 1.683245,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 1.683245,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        }
      }
    ]
  }
}

filter

返回的文档必须满足filter子句的条件。但是不会像Must一样，参与计算分值

should

返回的文档可能满足should子句的条件。在一个Bool查询中，如果没有must或者filter，有一个或者多个should子句，那么只要满足一个就可以返回。minimum_should_match参数定义了至少满足几个子句, 默认情况是1

GET /news/_search
{
  "query": {
    "bool": {
      "should": [
        {
          "match": {
            "title": "人才"
          }
        },
        {
         "match": {
            "title": "城市"
          }
        }
      ]
    }
  }
}

---输出
{
  "took" : 5,
  "timed_out" : false,
  "_shards" : {
    "total" : 3,
    "successful" : 3,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 2,
      "relation" : "eq"
    },
    "max_score" : 0.9140557,
    "hits" : [
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "3",
        "_score" : 0.9140557,
        "_source" : {
          "title" : "徙的鸟死于城市灯光，气象雷达如何拯救它们",
          "content" : "城市灯光会吸引迁徙的鸟类，并产生致死的后果。发表在4月21日《科学》杂志上的一篇文章，讲述了美国的鸟类学家如何利用气象雷达和建模，降低人造灯光影响下的鸟类死亡率",
          "categoryName" : "科技",
          "view_count" : 70,
          "publishTime" : "2022-04-26 12:00:00"
        }
      },
      {
        "_index" : "article",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 0.2876821,
        "_source" : {
          "title" : "芯片人才争夺",
          "content" : "芯片人才争夺“生猛”,需要大量人才",
          "categoryName" : "科技",
          "view_count" : 60,
          "publishTime" : "2022-04-19 12:00:00"
        }
      }
    ]
  }
}

must_not

返回的文档必须不满足must_not定义的条件。
如果一个查询既有filter又有should，那么至少包含一个should子句。
bool查询也支持禁用协同计分选项disable_coord。一般计算分值的因素取决于所有的查询条件。
bool查询也是采用more_matches_is_better的机制，因此满足must和should子句的文档将会合并起来计算分值。

Query DSL语法

POST localhost:9200/news/_search
{
    "query":{
        "bool":{
            "must":{
                "match":{
                    "title":"人才"
                }
            }
        }
    }
}

{
    "took": 56,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 0.5753642,
        "hits": [
            {
                "_index": "article",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.5753642,
                "_source": {
                    "title": "芯片人才争夺",
                    "content": "芯片人才争夺“生猛”,需要大量人才",
                    "publishTime": "2022-04-19 12:00:00"
                }
            }
        ]
    }
}

 简写形式：

POST  localhost:9200/news/_search
{
  "query":{
    "match":{
      "title":"人才"
    }
  }
}

{
    "took": 5,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 0.5753642,
        "hits": [
            {
                "_index": "article",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.5753642,
                "_source": {
                    "title": "芯片人才争夺",
                    "content": "芯片人才争夺“生猛”,需要大量人才",
                    "publishTime": "2022-04-19 12:00:00"
                }
            }
        ]
    }
}
POST localhost:9200/news/_search
{
    "query":{
        "bool":{
            "must":{
                "multi_match":{
                    "query":"人才",
                    "fields":[
                        "title",
                        "content"
                    ]
                }
            }
        }
    }
}

{
    "took": 62,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 0.7911257,
        "hits": [
            {
                "_index": "article",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.7911257,
                "_source": {
                    "title": "芯片人才争夺",
                    "content": "芯片人才争夺“生猛”,需要大量人才",
                    "publishTime": "2022-04-19 12:00:00"
                }
            }
        ]
    }
}

fuzzy query

返回包含与搜索词类似的词的文档，该词由Levenshtein编辑距离度量

POST  localhost:9200/news/_search
{
  "query":{
    "bool":{
      "must":{
       "fuzzy":{
         "content":{"value":"心片"}
        }
      }
    }
  }
}

输出：
{
    "took": 2,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 0,
            "relation": "eq"
        },
        "max_score": null,
        "hits": []
    }
}

查询计划

POST localhost:9200/news/_validate/query?explain
{
  "query":{
    "bool":{
      "must":{
       "fuzzy":{
         "title":{"value":"芯片"}
        }
      }
    }
  }
}


输出：
{
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    },
    "valid": true,
    "explanations": [
        {
            "index": "article",
            "valid": true,
            "explanation": "+title:芯片~0"
        }
    ]
}

搜索与聚合结合，统计类别的数量

POST localhost:9200/news/_search
{
    "size":0,
    "query":{
        "match_all":{

        }
    },
    "aggs":{
        "popular_colors":{
            "terms":{
                "field":"categoryName"
            }
        }
    }
}

输出：
{
    "took": 65,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 4,
            "relation": "eq"
        },
        "max_score": null,
        "hits": []
    },
    "aggregations": {
        "popular_colors": {
            "doc_count_error_upper_bound": 0,
            "sum_other_doc_count": 0,
            "buckets": [
                {
                    "key": "科技",
                    "doc_count": 3
                },
                {
                    "key": "汽车",
                    "doc_count": 1
                }
            ]
        }
    }
}
GET localhost:9200/myindex/_search?q=is

{
    "took": 4,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 0.2876821,
        "hits": [
            {
                "_index": "myindex",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.2876821,
                "_source": {
                    "title": "this is my first template"
                }
            }
        ]
    }
}

定制自己的dynamic mapping template

PUT localhost:9200/myindex
{
    "mappings": {
            "dynamic_templates": [
                { 
                  "en": {
                      "match":              "*_en", 
                      "match_mapping_type": "string",
                      "mapping": {
                          "type":           "text",
                          "analyzer":       "english"
                      }
                }                  
            }
        ]
	}
}

 插入数据

PUT localhost:9200/myindex/_doc/1
{
  "title":"this is my first template"
}


PUT localhost:9200/myindex/_doc/2
{
  "title_en":"this is my first template"
}

 搜索停用词is

搜索关键词template

GET localhost:9200/myindex/_search?q=template
{
    "took": 4,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 2,
            "relation": "eq"
        },
        "max_score": 0.2876821,
        "hits": [
            {
                "_index": "myindex",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.2876821,
                "_source": {
                    "title": "this is my first template"
                }
            },
            {
                "_index": "myindex",
                "_type": "_doc",
                "_id": "2",
                "_score": 0.2876821,
                "_source": {
                    "title_en": "this is my first template"
                }
            }
        ]
    }
}

参考：jianshu.com/p/50dbd7252d0a

yangyanping20108
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【教你通透ELK】ES索引管理
走向CTO的路上...
08-04 122
（2）文档：文档是 Elasticsearch 中的最小数据单元，可以理解为一条记录，每个文档都有一个唯一的标识符，也可以包含一个或多个字段。（1）索引：索引是 Elasticsearch 存储和管理数据的基本单元，每个索引包含多个文档。（1）数据存储：将数据存储在索引中，每个索引可以包含多个文档，每个文档可以包含多个字段。（2）数据索引：对数据进行索引，创建倒排索引以支持快速的全文搜索和过滤。（3）搜索和过滤：根据用户的查询条件进行搜索和过滤，返回符合条件的文档。
ELK课程教案.rar
最新发布
03-21
ELK（Elasticsearch, Logstash, Kibana）是一个流行的开源日志分析和可视化解决方案，广泛应用于系统监控、日志管理和数据洞察。本ELK课程教案将带你深入理解这一强大的技术栈，帮助你掌握其核心概念和实际应用。 ...
【ELK】使用filebeat为每个日志创建独立索引
cnskylee的博客
12-24 4337
EFK是ELK日志监控架构中一个较为简单的、轻量级的日志监控框架，主要使用到了Filebeat 、Elasticsearch以及Kibana。Filebeat采集日志，并通过配置为某一类日志（如Tomcat的日志、Nginx的日志等等）创建独立的索引。如果不做独立的配置，那么Filebeat将所有的日志都采用同一个默认索引。 这里使用的EFK的版本都为7.16.2版本，Elastic安装为单节点。EFK的安装配置，我之前的文章有详细说明，这里就不做介绍了。 ...
ELK详解（二十）——Elasticsearch索引管理
永远是少年
04-09 3559
今天继续给大家介绍Linux运维相关知识，本文主要内容是Elasticsearch索引管理。 一、索引查看 二、索引删除 （一）删除指定索引 （二）索引模糊匹配删除 三、禁用索引通配符 四、定时删除索引
Elastic：Data stream 在索引生命周期管理中的应用
Elastic 中国社区官方博客
12-03 7115
在我之前的文章中，我已经介绍了 Elasticsearch 的索引生命周期管理： Elasticsearch：Index 生命周期管理入门 Elastic: 使用索引生命周期管理实现热温冷架构 索引生命周期管理对于 Time Series Data (TSD) 非常有用。那么到底什么是 Time Series Data 呢？ 什么是 Time Series Data? TSD 始终与时间戳关联，该时间戳标识创建事件时该数据的时间点事件。 例如，它可以是传感器数据（温度测量）或安全设备
ELK
yongchaocsdn的博客
09-19 920
ELK stack：     Lucene：         文档: Document             包含了一个或多个域的容器；                 field:value             域：                 有很多选项                     索引选项、存储选项、域向量使用选项；                 索引选项用于通...
ELK中文手册-清晰版
12-07
ELK（Elasticsearch, Logstash, Kibana）栈是大数据分析和日志管理领域的一个强大工具组合，尤其在实时搜索、监控和数据分析方面表现出色。本手册提供了ELK的中文详细指南，旨在帮助用户更好地理解和应用这套系统。 ...
ELK v7.12.1安装包.zip
08-28
7.12.1版本优化了性能，提高了查询速度，同时增强了对JSON文档的支持和索引管理。 - **集群优化**：在7.x系列中，Elasticsearch引入了更多资源管理策略，包括更精细的内存分配和更好的节点协调，确保集群的高可用性...
elk 6.x集合.zip
11-27
4. **搜索与过滤**：支持高级搜索语法和过滤器，帮助用户快速定位所需信息。 5. **保存和分享**：用户可以保存仪表板和搜索，方便以后再次使用或与团队共享。 **Logstash 6.3.0 知识点** Logstash 是一个数据收集...
ELK日志收集系统操作手册.docx
03-03
你可以用Kibana搜索、查看、交互存放在Elasticsearch索引里的数据，使用各种不同的图标、表格、地图等，Kibana能够很轻易的展示高级数据分析与可视化。Kibana让我们理解大量数据变得很容易。 2.Kibana特性 Elastic...
日志系统ELK使用详解(一)--如何使用
热门推荐
BuquTianya的专栏
05-14 1万+
概述当我们管理和使用的后端服务程序突破单台场景，进入到集群部署场景时，日志文件就会散落在多台后端服务器上。这时候要查看、统计日志信息就需要到各个服务器上去取和查看，所以我们可能很想把这些日志文件归集到一个统一的地方，统一管理。在业内常见的部署组合就是ELK系统了。
elk笔记8--index
脚步不能达到的地方，眼光可以达到；眼光不能达到的地方，精神可以飞到
06-21 1603
elk 笔记8--index1. index 创建的几种方式直接创建index按照当前日期创建索引创建带有rollover功能的索引2. 索引的常见设置基本设置常见问题3. 说明 1. index 创建的几种方式 直接创建index 第一种方式最普通，此类index 写入时在logstash中直接指定index01即可； 其缺点是当日志量大的时候，会影响性能。 PUT index01 {} out: { "acknowledged" : true, "shards_acknowledged" : t
ELK搜索高级
1663988740
08-05 3017
ELK搜索高级课程 1． 课程简介 1.1 课程内容 ​ ELK是包含但不限于Elasticsearch（简称es）、Logstash、Kibana 三个开源软件的组成的一个整体，分别取其首字母组成ELK。ELK是用于数据抽取（Logstash）、搜索分析（Elasticsearch）、数据展现（Kibana）的一整套解决方案，所以也称作ELK stack。 ​ 本课程分别对三个组件进行详细介绍，尤其是Elasticsearch，因为它是ELK的核心。Elasticsearch会对底层的文档、索引、搜索、聚
ELK之elasticsearch删除索引
abtmh02622的专栏
05-30 389
　　参考文档：https://www.cnblogs.com/Dev0ps/p/9493576.html 　　elasticsearch使用时间久了会产生大量索引占用磁盘空间，可以删除索引来释放　　 　　查看当前所有索引 curl '192.168.1.4:9200/_cat/indices?v' 　　1，删除指定索引 curl -XDELETE 192.168...
ELK Elasticsearch 笔记（二）文档索引及管理
qq_15654157的博客
04-27 336
一、Elasticsearch 索引及其构建 简单来说，在Elasticsearch中建立索引的简要流程如下： 准备待处理的文档。一般而言，文档准备考研采用JSON格式，也可以使用第三方的工具协助进行处理。 将准备好的数据提交文档给Elasticsearch。 完成索引。 返回索引结果。http://localhost:9200/index名称/type名称/文档唯一标识 ...
ELK ② 索引, 创建, 查看, 删除, 分词器安装及使用, 映射, 创建, 查看, 修改,文档,增删改查及局部更新
gaoshan12345678910的博客
02-24 1248
ELK ② 索引, 创建, 查看, 删除, 分词器安装及使用, 映射, 创建, 查看, 修改,文档,增删改查及局部更新
ELK 基础原理 索引 （一）
qq_50909707的博客
09-17 809
通过倒排索引将关键字与对于索引关联，有效地提高查询效率。再次查询所有索引，我们可以看到对应的索引已经不存在了。Elasticsearch与Mysql的类比。
【ELK系列四】肝了两晚，你想要的elasticsearch内容放在这了
Chenftli的博客
01-28 5250
文章目录ES的核心概念及使用一、概述二、Elasticsearch核心概念索引 index类型 type映射 mapping文档 document字段Field接近实时 NRT集群 cluster节点 node分片和复制 shards&replicas三、Elasticsearch操作1、使用XPUT创建索引2、插入文档3、查询文档4、更新文档5、搜索文档6、删除文档7、删除索引8、条件查询8.1 使用match_all做查询8.2 关键字段进行查询8.3 bool的复合查询8.4 term、ter
ELK---索引（Elasticsearch 7.17）
Abner_G的博客
02-13 2692
https://blog.csdn.net/weixin_43871371/article/details/102973708
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值