![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 53
混子风闲
这个作者很懒,什么都没留下…
展开
-
Hive实现增量更新:full outer join 合并 + insert overwrite(阿里巴巴大数据实践中阿里平台使用方案)
首先感谢原文作者给我的启发,我加以修改。https://blog.csdn.net/magicharvey/article/details/20692829https://blog.csdn.net/CLKTOY/article/details/120306523前言我一直有个困惑,数仓日增量表,历史数据修改了除了拉链表还能怎么办?后来看了1和2,惭愧惭愧。说实话我也看了阿里巴巴中台建设这本书,我也看到了p42页这一块full outer join 合并 + insert overwr.原创 2022-03-23 16:03:03 · 4265 阅读 · 4 评论 -
部署mysql时遇到的3个小问题
背景在腾讯云ECS服务器上部署MYSQL的时候,发现外网无法连接mysql(Dbeaver总是提示连接超时)。排查的时候发现了3个问题,以及对应的解决方法,希望能给大家帮助。问题1.service mysql status找不到命令参考:https://blog.csdn.net/weixin_43404791/article/details/105174074找不到mysqld服务具体命令service mysqld statussystemctl status mysqld原创 2022-01-27 11:30:37 · 2189 阅读 · 0 评论 -
加载csv文件到hive的orc表
背景有一份csv文件,需要假造到hive的orc表步骤将orc表内容复制到notepad++,这里到notepad++出来的分隔符默认是tab符。我们将分隔符替换成你hive的分隔符,我这边分隔符是/u0001。Ctrl+Shift+A:/u0001然后保存成tex文件,上传到linux目录下我一直rz上传不成功,直接拖拽就成功了先load到存储格式为textfile的临时表,然后insert overwrite导入到orc的表load data local inpath ‘/home/c原创 2021-09-02 16:56:22 · 1199 阅读 · 1 评论