- 博客(2)
- 收藏
- 关注
原创 Spark-Sql的UDF功能实际运用、Spark-Sql中使用if返回多条件查询结果、Mysql中case-when多条件查询
项目实战之Spark-Sql的UDF功能实际运用、Spark-Sql中使用if返回多条件查询结果、Mysql中case-when多条件查询 1、Spark-Sql的UDF功能实际运用 通过spark.udf.register("udfName", func) 来进行注册 使用:select udfName(name) from people 来直接使用 a) 注册UDF方法 val sqlC...
2018-11-29 23:05:30 6875 1
原创 关于Spark Context创建的代码优化和自定义隐式转换及使用
一、关于SparkContext创建的封装 封装sparkContext创建实例,使代码浏览起来更高大上 1、在resource目录下创建application.conf的配置文件 设置一个程序运行时的开关,控制成是否是本地运行还是集群运行模式(cluster: 集群|local:本 机) dolphin.common.power=local 2、使用枚举类封...
2018-11-28 21:45:00 420 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人