python将循环输出合并_将通过FOR循环函数输出的多个数据帧合并到一个单独的datafram中...

我有一个FOR循环函数,它迭代表和列列表(zip)以获得最小值和最大值。每个组合的输出是分开的,而不是一个单独的数据帧/表。有没有一种方法可以将FOR循环的结果组合成函数中的一个最终输出?在from pyspark.sql import functions as f

def minmax(tables, cols):

for table, column in zip(tables, cols):

minmax = spark.table(table).where(col(column).isNotNull()).select(f.lit(table).alias("table"), f.lit(column).alias("col"), min(col(column)).alias("min"),

max(col(column)).alias("max"))

minmax.show()

^{pr2}$

函数的输出:+---------+-----+---+---+

| table| col|min|max|

+---------+-----+---+---+

|sales_123|costs| 0|400|

+---------+-----+---+---+

+----------+-----+---+---+

| table| col|min|max|

+----------+-----+---+---+

|sales_REW |price| 0|400|

+----------+-----+---+---+

期望输出:+---------+-----+---+---+

| table| col|min|max|

+---------+-----+---+---+

|sales_123|costs| 0|400|

|sales_REW|price| 0|400|

+---------+-----+---+---+

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值