2018年10月_灵动的艺术

原创 Nginx运维之五 Nginx变量

Nginx运维之五 Nginx变量常见变量拼接变量$arg_NAME$cookie_NAME$http_NAME$sent_http_NAME$sent_trailer_name常见变量#request line的请求参数$args#二进制的客户端地址，4字节的IPv4地址或16字节的IPv6地址$binary_remote_addr#发送到客户端的字节数，不计算响应头；此变量与...

2018-10-31 17:58:04 2221

Nginx运维之四 Http模块参数配置案例核心参数配置client_body_buffer_sizeclient_body_temp_pathclient_body_timeoutclient_header_buffer_sizeclient_header_timeoutclient_max_body_sizeconnection_pool_sizedefault_typekeepalive_t...

2018-10-31 16:05:15 2507

原创 Nginx运维之三配置说明

Nginx运维之三配置说明配置结构main模块events 模块事件模型worker_connections配置结构查看系统默认配置文件vim /usr/local/nginx/nginx.conf#user nobody;worker_processes 1;#error_log logs/error.log;#error_log logs/error.log n...

2018-10-31 11:29:57 1005

原创 Nginx运维之二简单安装和环境搭建

Nginx运维之二简单安装和环境配置安装环境gcc 安装PCRE pcre-devel 安装zlib 安装OpenSSL 安装下载安装配置安装编译安装配置编辑（案例）启动与停止配置并启动停止其他支持参数nginx控制信号开机自启动安装环境gcc 安装安装 nginx 需要先将官网下载的源码进行编译，编译依赖 gcc 环境，如果没有 gcc 环境，则需要安装。yum install gcc...

2018-10-30 15:54:03 1224

原创 Nginx运维之一反向代理、动静分离、负载均衡

Nginx运维之一反向代理、动静分离、负载均衡Nginx简述Nginx 优势功能Tengine反向代理正向代理反向代理动静分离负载均衡Nginx简述Nginx是lgor Sysoev为俄罗斯访问量第二的rambler.ru站点设计开发的。从2004年发布至今，凭借开源的力量，已经接近成熟与完善。Nginx功能丰富，可作为HTTP Web服务器，也可作为反向代理负载均衡服务器，邮件服务器等。...

2018-10-30 13:10:31 1287 1

原创 ElasticSearch学习笔记之二十八细说Pipeline Aggregations

ElasticSearch学习笔记之二十八细说Pipeline AggregationsAvg Bucket Aggregation(平均值分组聚合)Syntax(语法)avg_bucket 参数Max Bucket Aggregation(最大分组聚合)Syntax(语法)max_bucket 参数Min Bucket Aggregation(最小分组聚合)Syntax(语法)min_buck...

2018-10-26 11:42:55 3830

原创 ElasticSearch学习笔记之二十七 Pipeline Aggregations

ElasticSearch学习笔记之二十七 Pipeline AggregationsPipeline Aggregationsbuckets_path 语法Special Paths(特殊路径)Dealing with dots in agg names(处理聚合名称中有.)Dealing with gaps in the data(处理空数据)Pipeline AggregationsPi...

2018-10-26 11:05:12 4673 1

原创 ElasticSearch学习笔记之三十二 JAVA Client 之 Exists Delete Update APIs

ElasticSearch学习笔记之三十 JAVA Client 之 Exists Delete Update APIsExists APIExists RequestSynchronous Execution(同步执行)Asynchronous Execution(异步执行)Delete APIDelete RequestOptional argumentsSynchronous Executi...

2018-10-25 17:02:43 1978

原创 ElasticSearch学习笔记之三十一 JAVA Client 之 GET APIs

ElasticSearch学习笔记之二十八 JAVA Client 之 GET APIsGet APIGet RequestOptional arguments(参数配置)Synchronous Execution(同步执行)Asynchronous Execution(异步执行)Get ResponseGet APIGet RequestGetRequest形如：GetRequest g...

2018-10-25 15:37:22 1864

原创 ElasticSearch学习笔记之三十 JAVA Client 之 Document APIs

ElasticSearch学习笔记之二十八 JAVA Client 之文档请求概述Document APIs(文档APIS)Index APIIndex Request(索引请求)Providing the document source(构建文档请求体)Optional arguments(功能参数)Synchronous Execution(同步执行)Asynchronous Executi...

2018-10-25 14:19:51 2452

原创 ElasticSearch学习笔记之二十九 Java REST Client

ElasticSearch学习笔记之二十七 Java REST ClientJava REST ClientJava High Level REST ClientCompatibility(兼容性)JavadocMaven Repository(Maven仓库)Maven configurationGradle configurationLucene Snapshot repositoryDepe...

2018-10-25 12:41:26 2146

原创 ElasticSearch学习笔记之二十六嵌套桶聚合

ElasticSearch学习笔记之二十六嵌套桶聚合Nested Aggregation(嵌套聚合)Nested Aggregation(嵌套聚合)Nested Aggregation是一个可以对嵌套对象文档进行聚合的单分组聚合。举例来说我们有一个产品的索引，每个产品有着不同的经销商和不同的价格. 映射如下：PUT /index{ "mappings": { "produ...

2018-10-24 19:27:57 2828

原创 ElasticSearch学习笔记之二十五索引词聚合

ElasticSearch学习笔记之二十五索引词聚合Terms Aggregation(索引词聚合)SizeDocument counts are approximateTerms Aggregation(索引词聚合)Terms Aggregation是一个动态的多分组聚合，每个分组都有一个独一无二的索引词。例如：GET /_search{ "aggs" : { ...

2018-10-24 18:46:01 2293 2

原创 ElasticSearch学习笔记之二十四桶聚合续

ElasticSearch学习笔记之二十三桶聚合续Date Range Aggregation(时间范围聚合)Missing ValuesDate Format/PatternTime zone in date range aggregationsKeyed ResponseFilter Aggregation(过滤聚合)Filters Aggregation(多重过滤聚合)Anonymous ...

2018-10-24 16:03:25 2415

原创 ElasticSearch学习笔记之二十三桶聚合

ElasticSearch学习笔记之二十三桶聚合桶聚合Children Aggregation（子聚合）Range Aggregation（范围聚合）Keyed Response桶聚合桶聚合不同于指标聚合，它不对文档字段进行计算,而是对我们的文档进行分组，每一个分组都关联一个标准 (依赖于聚合类型)，这个标准决定文档是否会划分到分组. 换句话说，桶就是一个文档的集合，除了桶本身，桶计算还...

2018-10-23 18:23:02 5062

原创 ElasticSearch学习笔记之二十二指标聚合续

ElasticSearch学习笔记之二十二指标聚合续Max AggregationMin AggregationPercentiles AggregationStats AggregationSum AggregationValue Count AggregationMax AggregationMax Aggregation是一个从需要聚合的文档中提取字段最大值的单值数字型聚合. 这些值既...

2018-10-23 15:59:20 1514

原创 ElasticSearch学习笔记之二十一指标聚合

ElasticSearch学习笔记之二十一指标聚合指标聚合Avg AggregationScriptValue ScriptMissing valueWeighted Avg Aggregationweighted_avg Parametersvalue Parametersweight ParametersCardinality AggregationPrecision controlCoun...

2018-10-23 15:09:30 4310

原创 ElasticSearch学习笔记之二十聚合

ElasticSearch学习笔记之二十聚合聚合聚合的基本结构Values Source聚合聚合的核心在于基于搜索查询的聚合数据。它是基于简单的称为聚合构建块，它可以组合，以便构建复杂的数据总结。聚合通常可以视作一组在一系列文档上执行信息分析的工作单元，执行的上下文定义该文档集是什么（例如，顶级聚合在搜索请求的执行的查询/过滤器的上下文中执行）。聚合可以分为很多种，每一种都有其自己的目标...

2018-10-23 13:59:36 1586 1

原创 ElasticSearch学习笔记之十九多字段排序和字符串排序

ElasticSearch学习笔记之十九多字段排序和字符串排序排序多级排序字符串排序排序为了按照相关性来排序，需要将相关性表示为一个数值。在 Elasticsearch 中，相关性得分由一个浮点数进行表示，并在搜索结果中通过 _score 参数返回，默认排序是 _score 降序。新建索引映射PUT tweet{ "mappings": { "tweet": { ...

2018-10-23 11:01:24 16100 1

原创 ElasticSearch学习笔记之十八排序Sort

ElasticSearch学习笔记之十八排序SortSortSort ValuesSort OrderSort mode optionSorting within nested objectsMissing ValuesIgnoring Unmapped FieldsSortElasticsearch 允许你在特性的字段上进行一次或者多次排序，每次排序都是可以颠倒的，_score字段用来按照...

2018-10-23 09:50:23 13456 1

原创 ElasticSearch学习笔记十七文档更新及版本控制

ElasticSearch学习笔记十七文档更新及版本控制文档更新版本控制悲观并发控制乐观并发控制_version版本控制通过外部系统使用版本控制部分文档更新脚本更新文档部分失败重试文档更新在 Elasticsearch 中文档是不可改变的，不能修改它们。相反，如果想要更新现有的文档，需要重建索引。但是我们不需要自己来完成操作，Update API 会帮我们完成。例如我们新插入一条纪录...

2018-10-22 15:56:26 2566

原创 ElasticSearch学习笔记十六 Range数据类型和检索

ElasticSearch学习笔记十六 Range数据类型和检索Range数据类型数据和日期IP范围Range数据类型Elasticsearch支持以下范围数据类型：数据类型说明integer_range有符号32位整数范围 2-32 ~ 232-1float_range单精度32位IEEE 754 浮点数范围long_range有符号64位整数范围 ...

2018-10-22 14:04:24 12329

原创 ElasticSearch学习笔记十五深入检索

ElasticSearch学习笔记十五深入检索查询还是过滤过滤查询查询和过滤性能差异查询APImatch_allmatchmulti_matchrangetermtermsexists missing深入分析组合多查询constant_score 查询查询还是过滤Elasticsearch 的检索一般来讲我们分为2种：过滤（filtering context）和查询（query conte...

2018-10-22 11:40:51 1546

原创 ElasticSearch学习笔记十四检索API

ElasticSearch学习笔记十四检索API检索_searchhitstookshardstimeout多索引查询查询表达式分页合并查询语句检索lasticsearch 不只会_存储（stores）_ 文档，为了能被搜索到也会为文档添加_索引（indexes）_ ，这也是为什么我们使用结构化的 JSON 文档，而不是无结构的二进制数据。文档中的每个字段都将被索引并且可以被查询。El...

2018-10-22 09:58:34 1748

原创 ElasticSearch学习笔记之十三索引API

ElasticSearch学习笔记之十三索引API建立索引删除索引索引设置索引映射索引的打开与关闭建立索引我们知道，我们在想索引插入数据的时候，索引可以自动创建并创建映射，如果我们需要，我们可以对索引的建立过程做更多的控制：设置索引的分片和复制信息。配置映射信息。我们可以手动创建索引，在请求体里面传入设置或类型映射。PUT my_index{ "settings": { ...

2018-10-19 17:30:45 2385

原创 ElasticSearch学习笔记之十二 RESTful API with JSON over HTTP

ElasticSearch学习笔记之十二 RESTful API with JSON over HTTPRESTful API with JSON over HTTPRESTful API with JSON over HTTP所有其他语言可以使用 RESTful API 通过端口 9200 和 Elasticsearch 进行通信，你可以用你最喜爱的 web 客户端访问 Elasticsea...

2018-10-19 16:53:25 1847

原创 ElasticSearch学习笔记之十一 Anayle API和IK分词器

ElasticSearch学习笔记之十一 Anayle API和IK分词器Anayle APIIK分词器IK分词器版本支持安装下载或者编译选择一选择二重启ElasticSearchIK分词器效果Anayle APIanalyze API 可以用来查看可分析全文是如何被分析的。我们可以在消息体里，指定分析器和要分析的文本：GET /_analyze{ "analyzer": "stand...

2018-10-19 15:24:03 1275

原创 ElasticSearch学习笔记之十分析与分析器

ElasticSearch学习笔记之十分析与分析器分析分析器标准分析器简单分析器空格分析器语言分析器分析分析包含下面的过程：首先，将一块文本分成适合于倒排索引的独立的词条，之后，将这些词条统一化为标准格式以提高它们的“可搜索性”，或者 recall分析器执行上面的工作。分析器实际上是将三个功能封装到了一个包里：字符过滤器首先，字符串按顺序通过每个字符过滤器。他们的...

2018-10-19 14:32:34 1102

原创 ElasticSearch学习笔记之九复杂数据类型和嵌套对象

ElasticSearch学习笔记之九复杂数据类型和嵌套对象复杂数据类型空域数组域多层级对象内部对象的映射内部对象的索引内部对象数组嵌套对象嵌套对象映射复杂数据类型除了前面说到的简单数据类型，Elasticsearch还支持JSON 的null ，数组，和对象.空域字段取值可以为空，当然，数组也可以为空。然而，在 Lucene 中是不能存储 null 值的，所以我们认为存在 null ...

2018-10-19 14:20:30 4586

原创 ElasticSearch学习笔记之八 Doc Values and Fielddata

ElasticSearch学习笔记之八 Doc Values and FielddataDoc Values 简介Doc values 的原理深入理解 Doc Values列式存储的压缩禁用 Doc ValuesAnalyzed strings and FielddataDoc Values 简介当你对一个字段进行排序时，Elasticsearch 需要访问每个匹配到的文档得到相关的值。倒排索...

2018-10-19 13:42:44 1645

原创 ElasticSearch学习笔记之七映射参数(Mapping parameters)

ElasticSearch学习笔记之七映射参数（Mapping parameters）映射参数（Mapping parameters）analyzernormalizerboostcoercecopy_todoc_valuesdynamicenabledfielddataeager_global_ordinalsformatignore_aboveignore_malformedindex_op...

2018-10-19 13:03:33 3060 1

原创 ElasticSearch学习笔记六映射元字段( Mapping Meta-Fields)

ElasticSearch学习笔记五映射元字段( Mapping Meta-Fields）Meta-FieldsIdentity meta-fields（文档标示元字段）_index_uid_type_idDocument source meta-fields（愿文档元字段）_source禁用_source包含或者去除 _source 元字段里面的字段_sizeIndexing meta-fie...

2018-10-18 16:11:46 2824

原创 ElasticSearch学习笔记五映射和数据类型

ElasticSearch学习笔记五映射和数据类型映射(Mapping)动态映射动态映射规则静态映射Elasticsearch字段数据类型字符串类型整数类型浮点类型逻辑类型date类型binary类型array类型object类型映射(Mapping)映射定义了文档和它所包含的属性被存储类型和索引方式等等举例来说，我们用映射来定义以下信息：是否一个字符串应该被当成全文类型来存储和索引。...

2018-10-18 14:52:07 1817

原创 ElasticSearch学习笔记四文档和索引文档

ElasticSearch学习笔记四文档和索引文档文档JSON文档元数据_index_type_id索引文档使用自定义的 IDAutogenerating IDs文档在大多数应用中，多数实体或对象可以被序列化为包含键值对的 JSON 对象。但是很少只是简单的键值列表，更多时候它拥有复杂的数据结构，比如包含日期、地理位置、另一个对象或者数组。一个键可以是一个字段或字段的名称，一个值可...

2018-10-18 09:34:42 1314

原创 ElasticSearch学习笔记三 Elasticsearch Kibana x-pack安装与环境搭建

Elasticsearch Kibana x-pack安装与环境搭建环境要求安装Elasticsearchx-pack 安全控件安装kibana安装kibana安装x-pack使用kibana环境要求安装 Elasticsearch 之前，你需要先安装一个较新的版本的 Java，最好的选择是，你可以从 www.java.com 获得官方提供的最新版本的 Java。安装Elasticsearch...

2018-10-17 16:13:02 1631

原创 ElasticSearch学习笔记二初识Elasticsearch

初识ElaticsearchElasticsearch简介Elasticsearch术语及概念文本(Text)索引词／精确值(term)精确值 VS 全文分析(Analysis)与分析器字符过滤器分词器Token 过滤器映射(Mapping)集群(Cluster)节点(Node)分片(Shard)主分片(Primary shard)副本分片(Replica shard)复制(replica)路由(...

2018-10-17 14:34:55 1403

原创 ElasticSearch学习笔记一初识 Lucene

初识 Lucene什么是全文检索？非结构化数据搜索方法Lucene 简介索引和搜索新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图...

2018-10-17 11:46:33 1433

灵动的艺术的博客