自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 spark2.2 pyspark error: AttributeError: 'SparkSession' object has no attribute 'serializer'

需求:spark读取mysql数据为df,df想转RDD,df.rdd.map()报错sparksession的一个坑:用sparkcontext来解决sparksession没有序列化器的问题示例代码如下:from pyspark import SparkContextfrom pyspark.sql import SQLContextdef map_time(string):    time ...

2018-04-27 17:31:47 3541 1

提示
确定要删除当前文章?
取消 删除