![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hive
庶说大数据
这个作者很懒,什么都没留下…
展开
-
spark 将hive 中用户画像的数据写入hbase
用户场景:当用户数据量在千万级别的时候,而用户画像的标签却有几百个的时候,通过bulkload 将数据导入hbase ,由于需要对所有数据进行排序所以性能上而且不能出现任何数据重复的情况原创 2021-06-05 11:43:36 · 639 阅读 · 1 评论 -
hive 分区中存在中文导致表删除不掉处理方案
在实际项目中,修改原来的表结构,增加一个交易类型字段作为组合分区,由于是BI展示的表,交易类型实际存储的是中文,而且是已经投入使用的表,不能重新修改表名。1.查看表分区结构如下:show partitions ads_mk_coupon_receive_use_info;2.尝试通过删表,然后一直卡着没有任何反应,然后删除第一个分区,显示是成功的,但是结果并没有删除掉:alter table ads_mk_coupon_receive_use_info drop partition(ds_dt=.原创 2020-12-31 11:32:32 · 812 阅读 · 1 评论