- 博客(2)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 shell同时后台运行多个进程并等待
代码如下job_list='job1 job2 job3'pids=''for j in `echo $job_list`;do run_job $j & pids="$pids $!"donefor pid in $pids;do wait $pid || let "RES=1"doneif [[ "$RES" -ne 0 ]]; then exit $RESfi
2020-06-15 12:08:05
2206
原创 Spark中对dataframe内重复列求和
前言在处理dataframe中的字段名是，发现有些字段名在处理后是重复，于是新定义了策略，对这些相同列名的字段进行求和合并summing the duplicated columns代码实现#Hanle Duplicatesfrom operator import addfrom functools import reduceimport collectionsoriginal_columns = [...]columns_after_cleanup=[...]counter=colle
2020-06-08 11:19:55
2252
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人