spark 流应用读取kafka时报的jar包冲突,lz4-1.3.0.jar和lz4-1.2.0.jar不兼容,但在之前使用阿里云时发现提交spark命令时自动加载的lz4-java-1.4.0.jar,没有发生类似问题,copy此jar包到集群程序应用目录下,spark-submit通过 --jars 指定这个jar包,解决问题,感谢开发此兼容jar包的无名人士,提供了方便
Java Spark代码报错:java.lang.NoSuchMethodError:net.jpountz.lz4.LZ4BlockInputStream
最新推荐文章于 2021-10-08 17:46:54 发布