2019年03月_腊八粥2018

12月 11月 10月 08月 07月 05月 04月 03月 02月 01月

原创 ElasticSearch 开发总结（七）—— failed to send join request to master[...] reason RemoteTransportException

ElasticSearch版本6.6.1本地搭建了一个包含三个节点的ELasticsearch集群，作为测试环境，三个节点都是这样的错：failed to send join request to master。具体错误日志如下：[2019-03-11T18:00:19,521][INFO ][o.e.d.z.ZenDiscovery ] [slave] failed to se...

2019-03-12 09:51:31 5964

原创 ElasticSearch 应用开发（三）基于commons-pool2和TransportClient的ElasticSearch连接池

Java Client连接Elasticsearch集群，如果用单例模式或者SpringBean（本质也是单例模式），若项目多个模块都要使用Client进行增删改查，就需要进行池化。利用commons-pool2可以自定义对象池，基于此，可以实现线程池的方式连接Elasticsearch集群1.commons-pool2以下博客，对commons-pool2进行介绍，基本上可以理...

2019-03-11 15:51:22 2227

原创 ElasticSearch 开发总结(六）—exception caught on transport layer[....]closing connection

elasticsearch集群版本5.6.10，Java代码中Maven引入版本5.6.10，使用TransportClient连接ES集群，出现这个错误：[2019-03-10T15:16:21,269][WARN ][o.e.t.n.Netty4Transport ] [master] exception caught on transport layer [[id: 0x0844f1...

2019-03-11 15:50:59 17254 2

原创 ElasticSearch 应用开发（二）Java Client 连接ElasticSearch集群

利用Java API连接不同版本的ElasticSearch，方法是不一样的，本文只介绍主流的方法。#####无论如何请确保Client的版本和ElasticSearch集群版本保持一致，否则有可能出现不可预知的错误#####1.Java Client 连接ES集群（1）Node Client（java语言版本，已经在2.3版本中已经弃用）客户端节点也是es节点，加入es集群和...

2019-03-06 15:50:15 2310

转载 ElasticSearch 应用开发（一）ElasticSearch的安装

ElasticSearch集群安装，网上有很多博客，ES可以安装在windows、linux等操作系统上，只做简单介绍（1）windows上安装elasticsearchhttps://blog.csdn.net/shubingzhuoxue/article/details/80998738（2）linux上安装elasticsearchhttps://blog.csdn.net/...

2019-03-05 15:38:39 262

原创 ElasticSearch 开发总结（五）——Elasticsearch“StatusLogger Log4j2 could not find a logging implementation"

Java API 操作 ElasticSearch5.6.10报错Elasticsearch “StatusLogger Log4j2 could not find a logging implementation. Please add log4j-core to the classpath.”根据提示很简答，需要加log4j-core日志工具包，不过需要多一个，maven添加如下依赖...

2019-03-05 11:17:28 1059

原创 Lucene 基本原理（二）总体架构设计

1.Lucene架构设计Lucene架构设计针对开发者来说，Lucene最重要的两个部分：（1）Index Doucuments 索引能够针对文件系统、数据库、网络爬虫等方式的输入数据，建立索引；能够针对txt、world、Excel、pdf等多种格式的文件，建立索引；建立索引的数据，包含结构化和非结构化的数据，都是建立索引的基础；（2）Search Index 搜索...

2019-03-04 10:41:58 358

原创 ElasticSearch 开发总结（四）——NoNodeAvailableException: None of the configured nodes are available

NoNodeAvailableException: None of the configured nodes are available节点不可用，出现这个错误，简单思考一下，可能有以下几种原因：（1）ES集群处于异常状态不可用；（2）Java client正常 ES 集群正常，但是连接不到集群；（3）Java client异常，连接不到ES集群排查步骤：1.查看集群是否...

2019-03-01 09:20:56 1464

转载 ElasticSearch 基本原理（四）近实时（Near Real Time ，NRT）分析

ElasticSearch （Near Real Time ）NRT 分析Elasticsearch的核心优势就是（Near Real Time NRT）近乎实时，Elasticsearch能够做到准实时，而并不是完全的实时。下面介绍Elasticsearch是如何索引数据的整个流程。先上图：首先，当我们对记录进行修改时，es会把数据同时写到内存缓存区和translog中。而这个时...

2019-03-01 09:17:19 2380 1