![](https://img-blog.csdnimg.cn/20191127210535477.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Hive
文章平均质量分 65
Yanko24
不知不若闻之,闻之不若见之,见之不若知之,知之不若行之,学止于行而至矣,行之,明也。
展开
-
Hadoop集群搭建之Hive on Spark
Hadoop集群搭建之Hive on Spark用到的各个组件的版本组件版本hadoop3.3.1hive3.1.2spark2.4.6scala2.12.101. 准备工作# 下载spark的源码wget https://downloads.apache.org/spark/spark-2.4.6/spark-2.4.6.tgz2. 编译spark源码# 解压源码到目录下tar -zvxf spark-2.4.6.tgz &&am原创 2021-12-05 14:59:37 · 1989 阅读 · 0 评论 -
Hive简单介绍
Hive简单介绍1. Hive是什么?Hive是一个构建在Hadoop上的数据仓库框架,是应Facebook每天产生的海量新兴社会网络数据进行管理和(机器)学习的需求而产生和发展的。Hive可以将结构化的数据映射成为一张二维表,并提供了HQL(Hive SQL)进行查询和分析的功能,它的底层数据存储在HDFS中,可以实现大规模数据集的存储及处理。Hive的本质是将SQL语句转换为MapReduce任务执行的,但后期版本也推出了可以将Hive的执行引擎换成Spark或者Tez,提供HQL的好处就是为了使得原创 2020-09-17 08:26:32 · 172 阅读 · 0 评论 -
Hive常见的练习题
Hive常见的练习题1. 测试数据-- students_id s_name s_birth s_sex01 赵雷 1990-01-01 男02 钱电 1990-12-21 男03 孙风 1990-05-20 男04 李云 1990-08-06 男05 周梅 1991-12-01 女06 吴兰 1992-03-01 女07 郑竹 1989-07-01 女08 王菊 1990-01-20 女-- coursec_id c_course t_id01 语文 0202 数学 01原创 2020-09-05 11:50:39 · 1402 阅读 · 4 评论 -
Hive元数据信息对应的MySQL数据表
Hive元数据信息对应的MySQL数据表Hive的元数据一般选择放在关系型数据库中,自带的数据库是Derby,我将Hive的元数据信息存放在MySQL数据库中,对应的hive数据库中,共57张表。1. Hive版本信息元数据表VERSION中存储的是Hive的元数据版本,如果该表出现问题,根本进入不了Hive-Cli。VERSION表结构:元数据表字段说明示例数据VER_IDID(主键)1SCHEMA_VERSIONHive-Schema版本2.3.0原创 2020-09-05 11:48:55 · 2528 阅读 · 0 评论 -
Zeppelin集成Hive
Zeepline集成Hive1. 准备工作已经安装了Hive的机器以及安装了Zeepline的机器。2. Hive操作修改hive-site.xml配置文件:<configuration> <property> <name>hive.metastore.warehouse.dir</name> <value>/user/hive/warehouse</value> </prope原创 2020-08-14 20:04:07 · 363 阅读 · 0 评论 -
Hadoop集群搭建之Hive安装
Hadoop集群搭建之Hive安装1. 准备工作准备好已经安装了Hadoop的集群服务器之后,需要在其中一台中安装MySQL数据库,安装可以参考CentOS7安装MySQL5.7这篇文章。下载Hive的安装包并上传至其中一台服务器中。2. Hive本地安装1. 安装目录规划统一安装路径:/opt/apps统一软件存放路径:/opt/software2. 上传压缩包1. 将压缩包上传到[/opt/software]目录下,解压到[/opt/apps]目录下2. 修改[/home/hado原创 2020-08-10 19:10:46 · 593 阅读 · 0 评论 -
Hive常见错误
将hive-1.2.1升级到hive-2.3.6时出现的错误Exception in thread "main" java.lang.NoSuchMethodError: com.ibm.icu.impl.ICUBinary.getRequiredData(Ljava/lang/String;)Ljava/nio/ByteBuffer; at com.ibm.icu.char...原创 2019-12-11 10:32:06 · 1195 阅读 · 0 评论 -
Hive整合Hbase之后数据的存储位置浅谈
Hive整合Hbase之后数据的存储位置浅谈Hive整合Hbase之后数据的存储位置浅谈1. 创建hive表2. 进入Hbase查看数据3. 在Hive中查询这个表的数据4. 退出客户端5. 总结Hive整合Hbase之后数据的存储位置浅谈1. 创建hive表创建一张可以映射到Hbase的hive表create table if not exists hive2hbase (uid ...原创 2019-11-28 11:01:02 · 763 阅读 · 0 评论