java.lang.ClassNotFoundException: com.fasterxml.jackson.annotation.JsonMerge

最新推荐文章于 2024-09-14 17:34:07 发布

用代码编织梦想

最新推荐文章于 2024-09-14 17:34:07 发布

阅读量2.2k

点赞数 1

分类专栏： spark那点儿事文章标签： java scala spark

本文链接：https://blog.csdn.net/tothefuturefight/article/details/121444314

版权

spark那点儿事专栏收录该内容

1 篇文章 0 订阅

订阅专栏

今天使用scala 写点spark代码时发现， dataFrame.count()
报了这个错。猜测是jar包冲突了。
在这里插入图片描述

也在网上找了很多，但只单个方法是没解决。
后面将各位大佬的解决方法结合了起来，完美解决，方法如下：

首先，屏蔽掉hadoop所有的jackson依赖

	<dependency>
			<groupId>org.apache.hadoop</groupId>
			<artifactId>hadoop-common</artifactId>
			<version>3.3.1</version>
			<exclusions>
				<exclusion>
					<groupId>com.fasterxml.jackson.module</groupId>
					<artifactId>*</artifactId>
				</exclusion>
				<exclusion>
					<groupId>com.fasterxml.jackson.core</groupId>
					<artifactId>*</artifactId>
				</exclusion>
			</exclusions>
		</dependency>

然后，单独引入两个jackson的依赖：

	<dependency>
			<groupId>com.fasterxml.jackson.core</groupId>
			<artifactId>jackson-core</artifactId>
			<version>2.10.0</version>
		</dependency>
		<dependency>
			<groupId>com.fasterxml.jackson.core</groupId>
			<artifactId>jackson-databind</artifactId>
			<version>2.10.0</version>
		</dependency>