Spark-sql 计算某行值占累加总数的百分比

• 先看原数据结构和数据样例

SparkSession spark=SparkSession.builder().master("local[*]").getOrCreate();

Dataset<Row> table=spark.read().json("src/main/data/transfer_line_count.json");

table.printSchema();
table.show();

root
 |-- from_city_name: string (nullable = true)
 |-- to_city_name: string (nullable = true)
 |-- total_num: long (nullable = true)

+--------------+------------+---------+
|from_city_name|to_city_name|total_num|
+--------------+------------+---------+
|           新乡市|         上海市|        2|
|           南昌市|         天津市|        3|
|           抚州市|         温州市|       36|
|           娄底市|         中山市|        1|
|           广州市|         孝感市|        3|
|           天门市|         岳阳市|        1|
|           长春市|         沈阳市|        6|
|           成都市|         眉山市|       10|
|           广州市|         怀集县|        2|
|           北海市|         广州市|        8|
</