数据仓库
一克拉的小蚂蚁
这个作者很懒,什么都没留下…
展开
-
Python—调用GrowingIO平台接口下载CSV数据
import requestsimport gzipimport osos.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.UTF8'requests.packages.urllib3.disable_warnings()token = "Authorization"ai = "项目ID" #项目IDminutes = 5 #下载链接过期时间(分钟)export_type = "day" #导出任务类型,系统目前支持小时.原创 2020-07-20 10:22:42 · 614 阅读 · 3 评论 -
MySQL—数仓ETL开发中常用到的日期函数
在数据仓库ETL开发中,当以增量的方式进行数据同步时,会将数据表中的时间字段作为增量字段获取增量数据。对于MySQL数据库来说,总结了以下日期表示以及需要注意的问题。一、需要注意的问题:查看MySQL数据库的时区,以下MySQL的时间是utc时间,与北京时间相差8个小时,所以在进行ETL开发时,要将表字段转换成北京时间(在utc时间基础上加8个小时即为北京时间)二、utc时间转为北...原创 2019-11-28 10:17:22 · 1335 阅读 · 0 评论