关于Hive的中文注释以及hwi查询中文结果的问题

最新推荐文章于 2022-08-12 17:52:48 发布
最新推荐文章于 2022-08-12 17:52:48 发布
阅读量1.8k 收藏
点赞数
分类专栏： Hadoop 系统配置
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cuihaolong/article/details/52127118
版权
本文介绍了在Hive中遇到的中文注释显示问题以及HWI查询结果显示中文的解决方案。通过在MySQL数据库中修改Hive表的字符集设置，可以解决Hive中文注释显示为问号的问题。对于HWI，由于可能未设置正确的编码，可以在hive-hwi-2.1.0.war的view_result.jsp文件中指定编码格式来显示中文数据。
摘要由CSDN通过智能技术生成

1.Hive中文注释

当在hive中使用create table t1(c1 string comment '列1');创建表t1后，若用describe t1;显示表结构，则注释部分‘列1’显示为‘？1’

因此需要在MySQL数据库中对hive数据库的表进行编码设置，前文在配置环境部分已经对hive-site.xml中与MySQL连接的编码设置为UTF-8，正常的数据部分的中文在命令行下是可以显示的，此处仅叙述对MySQL中表的设置

使用mysql -u root -p进入MySQL

show databases;显示所有数据库

use hive;进入hive的默认数据库

show tables;查看所有表

alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; 修改字段注释字符集

alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;修改表注释字符集

在hive中删除t1表之后再重新创建即可显示中文注释

最低0.47元/天 解锁文章
cuihaolong
关注
专栏目录
mysql和hive获取表备注
爱米酱的博客
04-28 2017
hive获取表备注： 首先用hive语句得到相关信息 describe extended 表名 然后通过正则解析获取表备注 拿出列名为Detailed Table Information的值，用正则解析： String str = ReUtil.get("parameters:\\{(?!.*?\\().*transient_lastDdlTime.*?comment=(.*?)\\}", info,1); mysql获取表备注： CREATE TABLE test_table ( I
【干货】Apache Hive 2.1.1 安装配置超详细过程，配置hive、beeline、hwi、HCatalog、WebHCat等组件...
开源中国博客搬家测试账号
04-13 5889
    在Docker环境成功搭建了Apache Hadoop 2.8 分布式集群，并实现了NameNode HA、ResourceManager HA之后（详见我的另一篇博文：Apache Hadoop 2.8分布式集群详细搭建过程），接下来将搭建最新稳定版的Ap...
表和字段的注释信息查询语句
12-05
表注释信息,没有注释信息的表,字段注释信息,没有注释信息的字段
hive查询元数据得到表及字段结构注释
cakecc2008的专栏
03-24 8557
--hive查询元数据得到表及字段结构注释 SELECT DBS.DB_ID,DBS.NAME,TBL_ID,TBL_NAME,COLUMNS_V2.CD_ID,COLUMNS_V2.COMMENT,INTEGER_IDX from TBLS LEFT join DBS on TBLS.DB_ID=DBS.DB_ID left join SDS on TBLS.SD_ID=SDS.SD_ID...
Hive表设置支持中文注释、中文表数据导入
weixin_45666566的博客
01-07 4746
问题 1、创建表的时候，comment说明字段包含中文，表成功创建成功之后，中文说明显示乱 create table student_score( stu_id string comment '学生id', stu_name string, courses string, scores string ); 这是因为在MySQL中的Hive元数据不支持中文，故出现乱码。 2、加载中文数据到表中，结果出现乱码 hive> insert into student_score values
hive 查看库的注释及中文乱码及创建带注释的表
每天进步一点点儿
04-17 3127
把最近常用到的一些语句做些总结：包括查看库注释，注释中文乱码的解决，创建带注释的表等。 查看库的注释 describe database databasename; hive的注释(comment)中文乱码的解决方法 创建表的时候，comment说明字段包含中文，表成功创建成功之后，desc的时候中文说明显示乱码.如下图所示: 我们知道hive的元数据是有mysql管理的,所...
【hadoop期末复习】第九章 数据仓库Hive 超详细讲解
onion23的博客
07-01 7028
** 本专栏的Hadoop复习计划文章内容主要包含以下几个部分： 【简单】学习通习题 【进阶】课本课后练习 【操作】相关章节实验回顾 让我们开始吧！ 学习通 - 习题 课本 - 课后习题 实验回顾 ** 详见我之前写的：【hadoop学习之路】Hive HQL 语句实现查询 ...
Hive中文注释问题
Amitabha的自留地
08-05 4787
hive元数据建表之后需要修改一些字符集 为了解决hive的specified key was too long; max key length is 767 问题(MySQL的varchar主键只支持不超过768个字节 或者 768/2=384个双字节 或者 768/3=256个三字节的字段，UTF-8是三字节的。)，需要将数据库默认字符集改为latin1; alter databa
菜鸟先飞之初识Hive、安装教程及常见问题
望、本归心的博客
07-08 1528
一、初识Hive 1、什么是Hive? Hive是基于Haddop的数据仓库工具，可以将结构化的数据文件映射为一张数据库表并提供SQL查询功能，可以将SQL语句转换 MapReduce任务运行。 Hive提供了一系列的工具，可以给用来数据提取转换加载（ETL）是一种存储、查询和分析存储在Hadoop中的大规模数据的机制 2、Hive发展历史及版本 2007年8月 – 始于Facebook 2013年5月 – 0.11 Stinger Phase 1 ORC HiveServer2 20.
hive详细笔记之hive注释中文乱码问题
HANG.NIAN
06-24 3628
在hive中创建表 , 表中的字段注释是中文注释 create external table movie( userID int comment '用户ID', movieID int comment '电影ID', rating int comment '电影评分', timestamped bigint comment '评分时间戳', movieName string comment '电影名字', movieType string comment '电影类型', sex string c..
Hive查看表中文注释乱码问题
数据源的港湾
07-12 4211
现象 Hive使用show create table查看表结构，发现中文注释乱码，包括普通字段及分区字段。 解决 这是由于Hive元数据库跟注释相关的字段的编码不是UTF8类型，解决方法为登陆到元数据库中执行以下查看及修改命令， select table_collation from information_schema.tables where table_name in ('CO...
hive创表后，查看表注释是乱码的
迎接小天使
02-17 484
问题：hive创表后，查看表注释是乱码的 DROP TABLE IF EXISTS test; CREATE TABLE IF NOT EXISTS testdb.test( COMPANYNAME VARCHAR(400) COMMENT '请求的公司名称', CYM VARCHAR(400) COMMENT '请求公司的曾用名', SHIXINID VARCHA...
Hive常规操作(查看和操作分区，字段，注释)
我的祖传代码
01-07 7984
查看分区 describe formatted tableName partition(date_id="2019-01-07"); 查看table在hdfs上的存储路径及建表语句 show create table tableName ; 操作分区和表语句 alter table tableName add IF NOT EXISTS partition(date_id="$year...
hive SQL 创建数据库，创建hive表、查询时，其表名，字段，统统不区分大写(在底层一律转换为小写)
热门推荐
helloxiaozhe的博客
05-18 1万+
hive SQL 创建数据库，创建hive表、查询时，其表名，字段，统统不区分大写(在底层一律转换为小写)（1）、默认default数据库hive默认自带一个名为default的数据库，如果建表时没有指定你要用哪个数据库，默认你的表就会建到default数据库中。CREATE DATABASE|SCHEMA [IF NOT EXISTS] <database name>在这里，IF N...
hive表出现中文显示？情况解决
xiaonuoyo的博客
08-12 1927
hive表、字段出现中文乱码情况解决
Hive概述及其基本原理
weixin_41812379的博客
11-07 4126
Hive是一个基于Hadoop的数据仓库工具, 可以将结构化的数据文件映射为一张表, 并提供类似于SQL的查询功能。 Hive本身并不存储和处理数据，更像是一个接口，存储由HDFS实现，处理数据由MapReduce实现。简单来说，Hive可以将sql语句转换为MapReduce任务， 在HDFS上进行数据查询。 Hive的特点 Hive采用类SQL开发，简单容易上手，避免了编写MapReduce的工作 Hive执行延迟比较高，无法胜任实时的工作（OLTP），大多用于数据分析工作（OLAP）。 Hive擅长
转：hwi hive
iteye_17234的博客
10-17 194
备忘，HWI安装过程，整理以前的记录，今又想起来重装一次，居然又遇到新的问题，由于是笔记，有点杂乱。 Hive Web Interface（HWI）简介：Hive自带了一个Web-GUI，功能不多，可用于效果展示，如果没有安装Hue的话，是个不错的选择。   由于hive-bin包中没有包含HWI的页面，只有Java代码编译好的jar包：hive-hwi-1.2.0.jar   因此...
HIVE 基础知识
大树下那片阴凉
04-14 623
hive 其实是一个客户端，类似于navcat、plsql 这种，不同的是Hive 是读取 HDFS 上的数据，作为离线查询使用，离线就意味着速度很慢，有可能跑一个任务需要几个小时甚至更长时间都有可能。 在日常开发中 Hive 用的还是挺广泛的，常做一些统计工作，就我自己工作来看其实 80% 的工作由 Hive 的基础部分就能完成了，只有很少的情况需要用到一些复杂查询或者调优工作。 本文着重挑选出...
Hive查询数据时怎么使用中文别名？
baidu_38432186的博客
08-02 6114
使用中文别名时，需要将中文别名用反单引号括起来（tab键上面的那个键可以敲出来） --例如把“ar”改为中文别名“通过率” select prod_name, ar as `通过率` from table_name; 注意：上传csv文件建表时，不能使用中文的字段名称。使用命令建表时，也不要使用中文来命名字段名称。使用中文来命名字段，虽然不报错，但是建表后的字段名称是乱码的。因此，建表时注意使用英文名称来命名字段。 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值