Hive表描述乱码

在进行查看hive表字段描述信息的时候发现乱码

在这里插入图片描述

一,查看当前编码

1.打开mysql查看当前编码

mysql> \s

看到当前编码格式

在这里插入图片描述

2.接着输入下面语句查看

mysql> show variables like "char%";

在这里插入图片描述

二、我们修改my.cnf配置文件

vim /etc/my.cnf

在mysqld里面添加下面的属性

[mysqld]

init_connect='SET collation_connection = utf8_unicode_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_unicode_ci
skip-character-set-client-handshake

然后重启mysql

service mysqld restart

三、重新查看mysql编码

mysql> show variables like "char%";

在这里插入图片描述
然后进入hive元数据库

mysql> use hive;

#修改表字段注解和表注解
mysql> alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8
mysql> alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8
#修改分区字段注解:
mysql> alter table PARTITION_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8 ;
mysql> alter table PARTITION_KEYS modify column PKEY_COMMENT varchar(4000) character set utf8;
#修改索引注解:
mysql> alter table INDEX_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;

四、重启hive服务,重新建表再查看

在这里插入图片描述

乱码问题解决

  • 5
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hive导入数据乱码问题主要分为三种情况。第一种情况是Hive CLI查询乱码,但在Ambari端查看正常;第二种情况是导入包含汉字数据后,所有客户端方式查询都乱码;第三种情况是Hive CLI查询没有乱码,但通过JDBC或HiveServer2查询出现乱码。 对于第一种情况,导致乱码的原因是HiveServer2查询输出的格式发生了变化,可能是因为Hive环境的编码格式未配置正确。解决方案是在hive-env.sh文件的最后加上编码格式配置:export HADOOP_OPTS="$HADOOP_OPTS -Dfile.encoding=UTF-8"。 对于第二种情况,可能是由于使用的SSH工具的编码问题导致Hive CLI查询中文乱码。解决方案是将SSH工具(如Xshell、PuTTY)的编码修改为UTF-8,然后重新连接。 对于第三种情况,可能是因为数据编码不一致导致的问题。Hive默认使用UTF-8编码,而导入的中文文本数据需要保证也是UTF-8格式。解决方案是通过查看文本编码格式并进行修改。可以使用一些常用文本工具如EditPlus、Notepad打开包含中文的文件,将其编码格式修改为UTF-8并保存;或者在Linux或macOS终端下使用Vim编辑器打开文件,输入命令":set fileencoding=utf-8"修改编码格式并保存退出。 综上所述,解决Hive导入数据乱码问题的方法包括配置Hive环境的编码格式、修改SSH工具的编码设置以及确保数据的编码一致性。<span class="em">1</span><span class="em">2</span><span class="em">3</span><span class="em">4</span>

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值