在运行Spark程序的时候报错：Spark task not serializable error。
原因是运行的时候会把一个Class里面的任务分发到集群的多个机器上执行，
因此有些代码并未序列化，所以会报出上面的错误，为了避免错误出现，修改代码。
public class ClassName implements Serializable实现序列化的接口即可。
在执行Spark程序时遇到'Spark task not serializable error'，该错误源于非序列化对象尝试在集群中分发。为避免此问题，需要对代码进行调整以确保所有在任务中使用的对象都是可序列化的。
扫一扫
839
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
