- 博客(3)
- 收藏
- 关注
RSS订阅原创 linux_找到端口为8200的进程并杀掉
linux如何查看端口被哪个进程占用的方法： 1、lsof -i: 8200 2、netstat -tunlp |grep 8200 杀进程 kill 2280
2021-10-21 23:36:23
431
原创 spark集群执行python demo
spark集群通常用于处理大数据，通常涉及到任务执行的先后顺序，所以前面有DAG DAG文件 # DAG示例 # -*- coding: utf-8 -*- from airflow import utils from airflow import DAG from airflow.operators.bash_operator import BashOperator from datetime import timedelta from airflow.operators.sensors import E
2021-10-19 20:25:41
496
原创 sparksql_LPAD/RPAD实现补充字符到定长
需求：tableA表中有一个stat_hour字段，记录数据产生的hour。但由于tableA是爬虫回来落表，所以stat_hour字段有时存储为7，有时候是07，为了方便后面的数据处理，需要将stat_hour长度小于2时，补零，全部提取为‘07’这种形式 用到的函数：LPAD(str, len, padstr)，RPAD(str, len, padstr) lpad函数是Oracle数据库函数，lpad函数从左边对字符串使用指定的字符进行填充。l是left的简写，pad是填充的意思。Rpad同理。 实例
2021-10-15 14:17:33
1619
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人