- 博客(13)
- 收藏
- 关注
原创 Hive分区表新增字段后重跑历史数据,新增字段的值为NULL
Hive分区表增加字段后,重刷历史分区数据,新增字段显示为NULL。Hive引擎存在这个问题,spark-hive不存在这个问题。:在添加字段时只更新了表级的表结构元数据信息,而分区级的表结构元数据信息未进行更新,导致新增的字段没有写进去。:添加CASCADE关键字。CASCADE是级联的意思,修改表字段的同时级联修改历史分区的字段信息。
2024-03-25 10:12:15 201 1
原创 字节数仓面试SQL 之5 条数据的表 left join 3 条数据的表有多少种可能性
(这道题难点在于在较短时间内分析所有组合的可能性,比较考验脑子)
2023-11-22 16:32:49 433
原创 MySQL两个字段模糊匹配
今天遇到一个业务需求:两张MySQL表做join,两个关联键是包含关系,SQL该怎么实现。由于两个关联键是包含关系,那么首先想到的就是like模糊匹配。通常我们见过的like语法都是类似 a like ‘%aa%’; 那么根据这个思路,我们如何实现两个字段模糊匹配呢?原始表a:原始表cp:想要的结果:4.总结:两个字段模糊匹配:
2023-06-09 16:56:47 2822
原创 mysqldump: Couldn‘t execute ‘SELECT COLUMN_NAME, JSON_EXTRACT(HISTOGRAM, ‘$.“n
增加参数–column-statistics=0。
2023-05-25 18:07:55 233 1
原创 Hive union all性能优化
目录一、原SQL二、调优参数1.set hive.exec.parallel=true;2.set hive.exec.parallel.thread.number=32;3.性能对比一、原SQL***** 运行时间58min ********select `time`,srcroot,srctag,terminal ,tokentype as type,count(1) as cnt from hdp_quc.ucent_login_rec_hive_partwhere `time`
2022-03-23 10:45:19 1323
原创 SSB数据集导入ClickHouse
进入clickhouse-client时加一个-m的参数即可。clickhouse-client -m -h 10.43.237.127 -u clickhouse_operator --password clickhouse_operator_password
2021-10-21 18:03:14 829
原创 StarRocks入门
目录一、数据导入1.Broker load2.Stream load3.Routine load4.Insert5.Multi load一、数据导入1.Broker load2.Stream load3.Routine load4.Insert5.Multi load
2021-09-28 16:49:03 3265
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人