![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark Sql
技术蚂蚁
这个作者很懒,什么都没留下…
展开
-
Spark分析窗口函数
Spark1.4发布,支持了窗口分析函数(window functions)。 在离线平台中,90%以上的离线分析任务都是使用Hive实现,其中必然会使用很多窗口分析函数,如果SparkSQL支持窗口分析函数, 那么对于后面Hive向SparkSQL中的迁移的工作量会大大降低,使用方式如下: 1、初始化数据 创建表 [sql] view p转载 2016-11-30 19:18:24 · 3190 阅读 · 0 评论 -
Spark SQL的例子
package com.asto.lucius.spark.sparksql import org.apache.spark.{SparkContext, SparkConf} /** * Created by Administrator on 2015/7/7. */ object TestSQL { case class Trade(user_id: String, create_t转载 2016-11-22 20:41:24 · 390 阅读 · 0 评论