问题顾名思义,在通过shell或hue向hive插入数据时,有可能出现中文乱码。和运维GG聊了一下以后,说这个是集群缺陷问题,以后会解决。
那眼下的处理方式呢?我想了个简单的办法:
--出现乱码
insert into temp.Iceelfluo_featurelist PARTITION(ymd='2020-08-10') values ("3517146571244","张三","6","0","3");
--不出现乱码
insert into temp.Iceelfluo_featurelist PARTITION(ymd='2020-08-10')
select "3517146571244",decode(binary("张三"),'utf-8'),"6","0","3";
然后如果是在注释里面出现乱码的话,也有相应的解决方案:
alter table temp.Iceelfluo_featurelist modify column PARAM_VALUE varchar(1000) character set utf8;
当然还不行就召唤运维小哥吧……