集群环境Jar包冲突解决方案

问题描述:

项目同同时引入hadoop依赖和Elasticsearch依赖，hadoop和Elasticsearch都依赖底层guava库但版本不一样，导致依赖冲突，项目无法启动。

解决办法

使用 maven-shade-plugin 对需要的第三方包重命名并重新打包，映射成自己定义的名字

   开始实践
       1.在 pom.xml 文件中添加 shade 插件
     <dependencies>
    <dependency>                 
        <groupId>org.elasticsearch</groupId>                         
        <artifactId>elasticsearch</artifactId>             
        <version>2.1.2</version>   
    </dependency>
    <dependency>      
        <groupId>com.google.guava</groupId>       
        <artifactId>guava</artifactId>
        <version>18.0</version>
    </dependency>
</dependencies>
<build>
    <plugins>                 
        <plugin>                      
            <groupId>org.apache.maven.plugins</groupId>                   
            <artifactId>maven-shade-plugin</artifactId>
            <version>2.4.1</version>
            <configuration>         
                <createDependencyReducedPom>false</createDependencyReducedPom>            
            </configuration>
            <executions>                 
                <execution>                             
                    <phase>package</phase>                          
                    <goals>                                         
                        <goal>shade</goal>                                 
                    </goals>           
                    <configuration>             
                    <relocations>                
                        <relocation>                        
                            <pattern>com.google.guava</pattern>                     
                            <shadedPattern>my.elasticsearch.guava</shadedPattern>
                        </relocation>
                        <relocation>                  
                            <pattern>org.joda</pattern>                   
                            <shadedPattern>my.elasticsearch.joda</shadedPattern>
                        </relocation>
                        <relocation>                  
                            <pattern>com.google.common</pattern>                   
                            <shadedPattern>my.elasticsearch.common</shadedPattern>
                        </relocation>
                        <relocation>
                            <pattern>org.elasticsearch</pattern>
                            <shadedPattern>my.elasticsearch</shadedPattern>
                        </relocation>
                    </relocations>
                    <transformers>
                        <transformer
                            implementation="org.apache.maven.plugins.shade.resource.ManifestResourceTransformer" />
                        </transformers>
                    </configuration>
                </execution>
            </executions>
        </plugin>
    </plugins>
</build>

  2.在项目中引用新打的jar包
    <dependency>
      <groupId>my.elasticsearch</groupId>
      <artifactId>es-shaded</artifactId>
      <version>1.0-SNAPSHOT</version>
    </dependency> 

重新编译打包

  发现org.elasticsearch 都被替换成 my.elasticsearch 了，其他同理，也就不会出现在集群环境重产生 jar 包冲突的错误了