![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hive
weixin_43662454
这个作者很懒,什么都没留下…
展开
-
数仓表数据一般保留多久,而每个日志分区全量表快照一般保留多久
数据仓库整理部分内容类型:ods/永久保留 添加数据生命周期 ods 180天dw/365天/迭代删除/不用要的/ 1个月在存储资源有限的前提下,如何优化明细层存储:已经做好了orc+gz的压缩之后,如何优化存储1:大宽表+累计快照/删数据明细2:直接删/根据数据等级3.不删/业务提供资源...原创 2022-04-19 14:11:09 · 1077 阅读 · 0 评论 -
Hive的十四种调优方式:
Hive的十四种调优方式:第一种调优方式:fetch(hive可以避免MapReduce)对于hive可以简单地读取employee对应的储存目录下的文件,然后输出查询结果到控制台.修改hive.fetch.task.conversion默认是more,老版本为minimal,修改为more即可第二种:本地模式(在hive输入数据量是非常小的情况下,可以通过本地模式处理单台机器上所有的任务,...原创 2019-07-01 09:57:41 · 1115 阅读 · 1 评论