Spark的窗口函数WindowSpec之Java语言实现代码如下
import org.apache.spark.sql.expressions.WindowSpec;
import org.apache.spark.sql.expressions.Window;
import org.apache.spark.sql.functions;
WindowSpec windowSpec = Window.partitionBy("colName1").orderBy(functions.desc("colName2"));
rowDataset.withColumn("colName3", functions.row_number().over(windowSpec)).show();
其中colName1是窗口函数中的分组字段,如果是多个字段可以用逗号隔开,
其中colName2是窗口函数中的排序字段,如果是多个字段可以用逗号隔开,
其中colName3是窗口函数中的新增出来的列名