解决spark环境下关闭ES客户端报错问题

将spark处理的hive表格的数据写入到ES，报错如下：

CONSOLE# Exception in thread "elasticsearch[_client_][generic][T#2]" java.lang.NoSuchMethodError: my.io.netty.bootstrap.Bootstrap.config()Lmy/io/netty/bootstrap/BootstrapConfig;
CONSOLE# at org.elasticsearch.transport.netty4.Netty4Transport.lambda$stopInternal$4(Netty4Transport.java:314)
CONSOLE# at org.apache.lucene.util.IOUtils.close(IOUtils.java:89)
CONSOLE# at org.elasticsearch.common.lease.Releasables.close(Releasables.java:36)
CONSOLE# at org.elasticsearch.common.lease.Releasables.close(Releasables.java:46)
CONSOLE# at org.elasticsearch.common.lease.Releasables.close(Releasables.java:51)
CONSOLE# at org.elasticsearch.transport.netty4.Netty4Transport.stopInternal(Netty4Transport.java:297)
CONSOLE# at org.elasticsearch.transport.TcpTransport.lambda$doStop$20(TcpTransport.java:968)
CONSOLE# at org.elasticsearch.common.util.concurrent.ThreadContext$ContextPreservingRunnable.run(ThreadContext.java:568)
CONSOLE# at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
CONSOLE# at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
CONSOLE# at java.lang.Thread.run(Thread.java:745)

原因：

maven依赖冲突！！！
上图我们可以看到，ES的依赖中有一个类中有报错，什么原因呢？
我们可以看到，ES的依赖包中依赖的netty包应该是4.1.13.Final版本的，而在实际的中确实4.0.43.Final的，为什么会出现这种情况呢？
原来是spark中依赖了4.0.43.Final包，所以出现了依赖冲突，ES在关闭资源的时候用了spark依赖的这个netty包，自然就出现了“java.lang.NoSuchMethodError: my.io.netty.bootstrap.Bootstrap.config()Lmy/io/netty/bootstrap/BootstrapConfig”这个异常，因为4.0.43.Final版本的netty包中Bootstrap.java这个类中确实没有config()这个方法！！

解决方法：

原因找到了接却起来就很容易了，把maven依赖关系改一下就可以了，如下图：将spark中的4.0.43.Final版本的netty包剔除，换成4.1.13.Final版本的，问题就解决了！！