- 博客(2)
- 资源 (13)
- 收藏
- 关注
RSS订阅原创 spark-sql 优化
1. merger小文件 set spark.sql.hive.mergeFiles = true; 2.缓冲小表 set spark.sql.autoBroadcastJoinThreshold = 838861000; set spark.sql.shuffle.partitions = 1000;
2019-12-31 17:58:34
391
原创 Hive外部表误删后的恢复
Hive中的外部表是比较安全的一种数据管理方式，有时也会误删 使用外部表有一个很好的好处，如果不小心将表误删了，只需要重新创建外部表然后使用下面的语句修复分区即可。 MSCK REPAIR TABLE table_name ...
2019-12-30 16:41:51
1089
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人