Kryo序列化比Java序列化更快更紧凑,但Spark默认的序列化是Java序列化,因为Spark并不支持所有序列化类型,而且每次使用都必须进行注册。注册只针对与RDD。在DataFrame和DataSet当中自动实现了Kryo序列化。
Kryo序列化
最新推荐文章于 2024-09-30 16:17:17 发布
Kryo序列化比Java序列化更快更紧凑,但Spark默认的序列化是Java序列化,因为Spark并不支持所有序列化类型,而且每次使用都必须进行注册。注册只针对与RDD。在DataFrame和DataSet当中自动实现了Kryo序列化。