SparkSession读取json格式数据和去除null和空字符串问题
spark读取不同文件类型的配置都是不同的 首先先看一下不同格式的option的参数。option参数介绍:属性名称默认值含义primitivesAsStringfalse将所有 原始类型 推断为 字符串类型prefersDecimalfalse将所有 浮点类型 推断为 decimal 类型,如果不适合,则 推断为 double 类型allowCo...
原创
2020-02-07 14:13:57 ·
2114 阅读 ·
0 评论