ElasticSearch学习笔记—

核心概念：

1. （1）Near Realtime（NRT）：近实时，两个意思，从写入数据到数据可以被搜索到有一个小延迟（大概1秒）；基于es执行搜索和分析可以达到秒级
   （2）Cluster：集群，包含多个节点，每个节点属于哪个集群是通过一个配置（集群名称，默认是elasticsearch）来决定的，对于中小型应用来说，刚开始一个集群就一个节点很正常
   （3）Node：节点，集群中的一个节点，节点也有一个名称（默认是随机分配的），节点名称很重要（在执行运维管理操作的时候），默认节点会去加入一个名称为“elasticsearch”的集群，如果直接启动一堆节点，那么它们会自动组成一个elasticsearch集群，当然一个节点也可以组成一个elasticsearch集群
   （4）Document&field：文档，es中的最小数据单元，一个document可以是一条客户数据，一条商品分类数据，一条订单数据，通常用JSON数据结构表示，每个index下的type中，都可以去存储多个document。一个document里面有多个field，每个field就是一个数据字段。

product document
{
  "product_id": "1",
  "product_name": "高露洁牙膏",
  "product_desc": "高效美白",
  "category_id": "2",
  "category_name": "日化用品"
}

（5）Index：索引，包含一堆有相似结构的文档数据，比如可以有一个客户索引，商品分类索引，订单索引，索引有一个名称。一个index包含很多document，一个index就代表了一类类似的或者相同的document。比如说建立一个product index，商品索引，里面可能就存放了所有的商品数据，所有的商品document。
（6）Type：类型，每个索引里都可以有一个或多个type，type是index中的一个逻辑数据分类，一个type下的document，都有相同的field，比如博客系统，有一个索引，可以定义用户数据type，博客数据type，评论数据type。
（7）shard：单台机器无法存储大量数据，es可以将一个索引中的数据切分为多个shard，分布在多台服务器上存储。有了shard就可以横向扩展，存储更多数据，让搜索和分析等操作分布到多台服务器上去执行，提升吞吐量和性能。每个shard都是一个lucene index。
（8）replica：任何一个服务器随时可能故障或宕机，此时shard可能就会丢失，因此可以为每个shard创建多个replica副本。replica可以在shard故障时提供备用服务，保证数据不丢失，多个replica还可以提升搜索操作的吞吐量和性能。primary shard（建立索引时一次设置，不能修改，默认5个），replica shard（随时修改数量，默认1个），默认每个索引10个shard，5个primary shard，5个replica shard，最小的高可用配置，是2台服务器。

elasticsearch核心概念 vs. 数据库核心概念
| elasticsearch | |数据库
|-Document-|-行-|
|-Type-|-表-|
|-Index-|-库-|

检查ES是否启动成功：http://localhost:9200/?pretty
本地kibana访问地址：http://localhost:5601

常用命令：
1、快速检查集群的健康状况：GET /_cat/health?v

如何快速了解集群的健康状况？green、red、yellow？
green：每个索引的primary shard和replica shard都是active状态的
yellow：每个索引的primary shard都是active状态的，但是部分replica shard不是active状态
red：不是所有索引的primary shard和replica shard都是active状态的，部分索引有数据丢失
2、快速查询集群中有那些索引：GET/_cat/indices?v

3、创建索引：PUT /index/type/id{json数据}
新增商品：

PUT /ecommerce/product/1
{
	"name":"gaolujie yagao",
	"desc":"gaolujie meibai",
	"price":30,
	"producer":"gaolujie yagao producer",
	"tags":["meibai","fangzhu"]
}
PUT /ecommerce/product/2
{
	"name":"zhonghua yagao",
	"desc":"zhonghua meibai",
	"price":40,
	"producer":"zhonghua producer",
	"tags":["meibai","fangzhu"]
}
PUT /ecommerce/product/3
{
	"name":"jiajieshi yaogao",
	"desc":"jiajieshi fangzhu",
	"price":25,
	"producer":"jiajieshi yagao producer",
	"tags":["meibai","fangzhu"]
}

4、删除索引：DELETE /test_index?pretty
5、查询索引：GET /index/type/id
查询商品：

GET /ecommerce/product/1
{
  "_index": "ecommerce",
  "_type": "product",
  "_id": "1",
  "_version": 1,
  "found": true,
  "_source": {
    "name": "gaolujie yagao",
    "desc": "gaoxiao meibai",
    "price": 30,
    "producer": "gaolujie yagao producer",
    "tags": [
      "meibai",
      "fangzhu"
    ]
  }
}

6、修改索引：替换文档

PUT /ecommerce/product/1
{
	"name":"jiaqiangban guolujie yagao",
	"desc":"gaoxiao meibai",
	"price":30,
	"producer":"gaolujie yagao  producer",
	"tags":["meibai","fangzhu"]
}

替换方式有一个不好，即使必须带上所有的field，才能去进行信息的修改
7、修改索引：更新文档

POST /ecommerce/product/1/_update
{
  "doc": {
    "name": "jiaqiangban gaolujie yagao"
  }
}

8、删除索引：删除文档
DELETE /ecommerce/product/1
9、搜索全部数据：GET /ecommerce/product_search
took：耗费了几毫秒
timed_out：是否超时，这里是没有
_shards：数据拆成了5个分片，所以对于搜索请求，会打到所有的primary shard（或者是它的某个replica shard也可以）
hits.total：查询结果的数量，3个document
hits.max_score：score的含义，就是document对于一个search的相关度的匹配分数，越相关，就越匹配，分数也高
hits.hits：包含了匹配搜索的document的详细数据
该搜索方式语法类似于http请求，如搜索商品名称中包含yagao的商品且按照售价进行降序排列的查询语句为：
GET /commerce/product/_search?q=name:yagao&sort=price:desc
10、按特定领域查询数据：
GET /index/type/_search{“query”:{“match_all”:{}}}
1)查询所有商品：

GET /ecommerce/product/_search
{
	"query":{
		"match_all":{}
	}
}

2)查询名字中包含yagao的商品并按价格降序排列：

GET /ecommerce/product/_search
{
	"query":{
		"match":{
			"name":"yagao"
		}
	},
	"sort":[
		{"price":"desc"}
	]
}

3）分页查询商品
分页每页显示1条，显示第二页

GET /ecommerce/product/_search
{
	"query":{"match_all":{}},
	"from":1,
	"size":1
}

4)指定要查询出商品的价格和名称就可以
更加适合生产环境的使用，可以构建复杂的查询

GET ecommerce/product/_search
{
	"query":{"match_all":{}},
	"_source":["name","price"]
}

5)搜索商品名称中包含yagao，而且价格大于25元的商品

GET /ecommerce/product/_search
{
  "query": {
    "bool": {
      "must": {
          "match": {
            "name": "yagao"
          }
      },
      "filter": {
        "range": {
          "price":{"gt":25}
        }
      }
    }
  }
}

6)全文搜索

GET /ecommerce/product/_search
{
	"query":{
		"match":{
			"producer":"yagao producer"
		}
	}
}

producer这个属性先被拆分建立倒排索引
7)短语搜索
查询producer字段包含“yagao producer ”的商品信息

GET /ecommerce/product/_search
{
	"query":{
     	"match_phrase":{
				"producer":"yagao producer"
		}
	}
}

8)高亮搜索结果
将producer字段包含“gaolujie”的商品prducer高亮

GET /ecommerce/product/_search
{
	"query":{
		"match":{
				"producer" :"gaolujie"
		}
	},
		"highlight":{
			"fields":{
				"producer":{}
			}
		}
}