python
sgqhappy
这个作者很懒,什么都没留下…
展开
-
数据提取python脚本
数据提取python脚本版权声明:本文为博主原创文章,转载请注明出处:https://blog.csdn.net/sgqhappy/article/details/83988985我们经常用到数据提取的Hive Sql的编写,每次数据提取都得进行hive的编写,为了将这种重复性强的运行命令简单化自动化,我特地编写了一个python脚本,可以实现数据清洗,数据处理,计数下发,读写文件,保存日志等...原创 2018-11-13 14:52:12 · 1987 阅读 · 0 评论 -
数据落地压缩转码打包下发python脚本
数据落地压缩转码打包下发python脚本版权声明:本文为博主原创文章,转载请注明出处:https://blog.csdn.net/sgqhappy最近一直在研究大量数据通过hive清洗提取后的落地下发问题,为了简化业务并且将业务自动化,我把数据落地压缩转码打包下发等功能写成脚本执行,运用了当前比较流行的python语言,如有疑问,请感兴趣的朋友们留言多多交流。1、导包#!/usr/bin/...原创 2018-11-12 10:25:40 · 251 阅读 · 0 评论