talen_hx的博客

Elasticsearch 索引模板

使用库(olivere/elastic/v7)操作es。1、初始化es操作客户端。2、使用must查询数据。4、查询后，根据字段排序。

通常es产品里面，数据清洗的logstash，这里使用另外的ingest做简单的数据处理。还可以使用ScriptPrcessor，这种自由度更大，可以处理稍微复杂点数据。这里是根据逗号分隔数据，变成数组。

去重 指定字段

SearchRequest searchRequest = new SearchRequest("order");SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder();BoolQueryBuilder boolQueryBuilder = new BoolQueryBuilder();boolQueryBuilder.must(QueryBuilders.matchQuery("userCode", userCode).

package mainimport ( "context" "fmt" "github.com/olivere/elastic/v7")type Person struct { Name string `json:"name"` Age int `json:"age"` Married bool `json:"married"`}func main() { client, err := elastic.NewClient(elastic.SetUR.

POST esindex/_doc/id/_update{ "script" : "ctx._source.bussinesData.remark='test'",}es的restful接口 UpdateRequest updateRequest = new UpdateRequest(dto.getEsIndex(), dto.getId()); Map<String, Object> params = new HashMap<String, Object>(.

GET es-index/_search{ "size": 0, "aggs": { "group_by_data_domain": { "terms": { "field": "data.domain.keyword" }, "aggs": { "count_domain": { "bucket_selector": { "buckets_path": { .

#基数统计GET kibana_sample_data_ecommerce/_search{ "size": 0, "aggs": { "customer_id_card": { "cardinality": { "field": "customer_id", "precision_threshold": 80 } } }}#字段数量统计GET kibana_sample_data_ecommerce/_sea...

POST _scripts/kibana-flight{ "script": { "lang": "mustache", "source": { "_source": [ "Dest","DestRegion" ], "size": 20, "query": { "multi_match": { "query": "{{q}}", "fields": ["Dest",...

1.best_fieldsGET /kibana_sample_data_flights-1227/_search{ "query": { "multi_match": { "query": "Sydney Kingsford", "type": "best_fields", "fields": [ "Dest", "DestCityName" ] } }}2.most_fields.

只提供一个输入框，查询相关的多个字段，使用DisjunctionMaxQuery --- 最佳字段查询，tie_breaker参数调整POST kibana_sample_data_flights-1227/_search{ "query": { "dis_max": { "tie_breaker": 0.7, "boost": 1.2, "queries": [ { "match": { "

es的bool查询

//查询前缀包含的内容POST /products/_search{ "query": { "prefix": { "desc.keyword": { "value": "iP" } } }}POST /products/_search{ "query": { "term": { "productID.keyword": "XHDK-A-1293-#fJ3" } }}//不查询为空的数据.

Dynamic mapping的机制，使得无需手动定义mappings，es会自动根据文档信息，推算出字段类型，但这也存在不好的地方，无法控制结构。如果将Dynamic设置为true，mapping会被更新，如果设置为false，mapping 不会被更新，但信息会存储在_source中，如果设置为Strict，文档写入失败(strict_dynamic_mapping_exception)自带的char_filter：html_strip、mapping、pattern replacemen.

GET kibana_sample_data_flights/_search{ "query": { "query_string": { "default_field": "OriginCityName", "query": "Frankfurt and Airport" } }}GET kibana_sample_data_flights/_search{ "query": { "query_string": { "fiel...

#泛查询GET kibana_sample_data_flights/_search?q=2021{ "profile": true}#指定字段查询GET kibana_sample_data_flights/_search?q=timestamp:2021{ "profile": true}#布尔操作符GET /kibana_sample_data_flights/_search?q=Dest:(Sydney AND Mind){ "profile": "true"}...

一、基础数据类型string类型：keyword，text，text可以来用进行分词查询 数字类型：long,integer,short,byte,double,float,half_float,scaled_float 时间类型：date booleano类型：boolean 二进制类型：binary 区间类型：integer_range,float_range,long_range,double_range,date_range二、复杂类型数组类型 对象类型object nest

URL中不指定index和type GET _mget{ "docs": [ { "_index": "yu-company-003", "_id": 1 }, { "_index": "yu-company-003", "_id": 2 } ]} URL中指定index GET /yu-company-003/_mget{ "docs": [ { "_id": 2

基本搭建可参考搭建elasticsearch7.11.2的源码环境这里说说不同点首先要用jdk16版本，可自行下载或elasticsearch里面也自带了jdk其次在 security.policy 文件里面，要7.11.2的基础上，多加permission org.elasticsearch.secure_sm.ThreadPermission "modifyArbitraryThreadGroup";permission org.elasticsearch.secure_sm.Thr

一、首先下载elasticsearch源码，从github上下载，本次下载版本为7.11.2，地址为https://github.com/elastic/elasticsearch.git二、下载软件elasticsearch软件，本次版本为7.11.2，配置gradle，版本最好是6.1以上，本次版本为6.8.3，然后配置gradle环境变量GRADLE_HOME（gradle的软件目录），GRADLE_USER_HOME（gradle项目依赖的lib包下载目录）三、elasticsearch