Es的几个常见故障

最新推荐文章于 2024-09-23 14:55:54 发布

xuguokun1986

最新推荐文章于 2024-09-23 14:55:54 发布

阅读量8.1k

点赞数

分类专栏：大数据 ES

大数据同时被 2 个专栏收录

178 篇文章 1 订阅

订阅专栏

29 篇文章 0 订阅

订阅专栏

Elasticsearch是一个开源的分布式实时搜索与分析引擎，支持云服务。它是基于Apache Lucene搜索引擎的类库创建的，提供了全文搜索能力、多语言支持、专门的查询语言、支持地理位置服务、基于上下文的搜索建议、自动完成以及搜索片段(snippet)的能力。Elasticsearch支持RESTful的API，可以使用JSON通过HTTP调用它的各种功能，包括搜索、分析与监控。此外，它还为Java、PHP、Perl、Python以及Ruby等各种语言提供了原生的客户端类库。下面是总结了一下使用 elasticsearch所遇到的各类问题以及相关的解决方案。

1、out of memory错误问题

因为默认情况下es对字段数据缓存(Field Data Cache)大小是无限制的，查询时会把字段值放到内存，特别是facet查询，对内存要求非常高，它会把结果都放在内存，然后进行排序等操作，一直使用内存，直到内存用完，当内存不够用时就有可能出现out of memory错误。

解决方法：

(1)设置es的缓存类型为Soft Reference，它的主要特点是据有较强的引用功能。只有当内存不够的时候，才进行回收这类内存，因此在内存足够的时候，它们通常不被回收。另外，这些引用对象还能保证在Java抛出OutOfMemory 异常之前，被设置为null。它可以用于实现一些常用图片的缓存，实现Cache的功能，保证最大限度的使用内存而不引起OutOfMemory。在es 的配置文件加上index.cache.field.type: soft即可。

(2)设置es最大缓存数据条数和缓存失效时间，通过设置index.cache.field.max_size: 50000来把缓存field的最大值设置为50000，设置index.cache.field.expire: 10m把过期时间设置成10分钟。

2、抛出异常，错误如下：

 
 1org.elasticsearch.transport.RemoteTransportException: Failed to deserialize exception response from stream

原因：es节点之间的JDK版本不一样

解决方式：统一JDK版本和环境

3、抛出异常，错误如下：

 
 org.elasticsearch.client.transport.NoNodeAvailableException: No node available

(1)端口错误

client = new TransportClient().addTransportAddress(new InetSocketTransportAddress(ipAddress, 9300));

端口9300写成9200的报错No node available 或者查看连接的是不是本地计算机，如果是远程的话查看一下IP地址是否正确。

(2)jar包报错误的话可能是引用包不匹配，开启的服务是什么版本最好对应相应的jar包。

(3)修改了集群名称，设置了集群名字导致出现问题，设置操作如下：

 
 Settings settings = ImmutableSettings.settingsBuilder().put("cluster.name", "yoodb").build();  
            client = new TransportClient(settings).addTransportAddress(new InetSocketTransportAddress(ipAddress, 9300));

(4)集群超过5s没有响应，解决方式如下：

1)设置client.transport.ping_timeout超时时间，增大一些

2)代码内嵌入，如下：

 
 while (true) {  
try {  
    bulk.execute().actionGet(getRetryTimeout());  
    break;  
} catch (NoNodeAvailableException cont) {  
    Thread.sleep(5000);  
    continue;  
}  
}