- 博客(3)
- 收藏
- 关注
RSS订阅原创 hive常见参数
注意：因为在yarn container这种模式下，map/reduce task是运行在Container之中的，所以上面提到的mapreduce.map(reduce).memory.mb大小都大于mapreduce.map(reduce).java.opts值的大小。set hive.exec.max.dynamic.partitions.pernode=1000 -- 一个 mapreduce job所允许的最大的动态分区的个数。AST：输出查询的抽象语法树。-- 表示同时运行的job的个数。
2023-05-29 17:16:23
741
1
原创 hive外表
外表的表结构和表数据是解绑的，表相当于定义了去解析相应的文件的规范，删除外表时，hdfs中数据文件不会一起删除；删除内表时，表数据及hdfs中数据文件会一起删除。
2023-05-29 17:10:33
171
1
原创 hive表操作
首先建立一张表结构相同的新表 tb_new->旧表 tb数据导入到新表tb_new中->老表重命名tb_bak,tb_new重命名为tb -> 并行观察两天tb和tb_bak数据，核对无问题后drop掉tb_bak，tb改造完成。------------------必须严格保证insert语句中的字段和建表语句中的字段的顺序一致！------------------select regexp_replace('foobar', 'oo|ar', 'A') --返回：fAbA。
2023-05-05 16:20:46
79
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人