Hive:简单的安装和搭建derby以及部分操作(Quick Start)

1.声明

当前内容主要用于本人学习和复习,当前内容主要为下载安装启动当前的Hive

当前内容来源:Hive官方文档

2.下载和解压

在这里插入图片描述
这里要求Java1.7和Hadoop2.X以及Hive2.X
本人环境:jdk1.8,Hadoop2.8.5,Hive 2.3.7

下载apache-hive-2.3.7-bin.tar.gz并解压

3.使用前的配置

在这里插入图片描述
Hive使用Hadoop,所以的路径上面必须要有Hadoop(直接配置环境变量HADOOP_HOME)和HIVE环境变量
在这里插入图片描述
启动当前的Hadoop:./sbin/start-all.sh

等待启动完成…

开始为当前的Hive配置HDFS上面的文件夹

hadoop fs -mkdir   		/tmp
hadoop fs -mkdir       /user
hadoop fs -mkdir       /user/hive
hadoop fs -mkdir       /user/hive/warehouse
hadoop fs -chmod g+w   /tmp
hadoop fs -chmod g+w   /user
hadoop fs -chmod g+w   /user/hive
hadoop fs -chmod g+w   /user/hive/warehouse

就是基本按照官方的配置即可

4.启动并初始化数据库

在这里插入图片描述
直接进入Hive中,开始初始化数据库(其中<db type>表示你想创建的数据库类型):

./bin/schematool -dbType <db type> -initSchema

例如:创建官方的derby数据库(纯java数据库)

./bin/schematool -dbType derby -initSchema

在这里插入图片描述
启动hive进入shell命令行

./bin/hive

在这里插入图片描述

5.使用官方的操作

create table pokes(foo int,bar string);
create table invites(foo int ,bar string) partitioned by (ds String);
show tables;

在这里插入图片描述
查看表结构和查询数据:
在这里插入图片描述

结果发现当前的derby的语法类似于mysql数据库(所以就不测试了)

总的来说,当前的hive可以初始化为各种数据库,并使用相对应的sql语言…(本质上就是多版本数据库?)

6.查看当前的HDFS文件

在这里插入图片描述
查看/user下面的东西
在这里插入图片描述
发现我们初始化数据库时,然后创建的表会出现在前面创建的文件夹中:/user/hive/warehouse

为表users中添加数据:(users表中具有id int,name string)
在这里插入图片描述
此时发现:
在这里插入图片描述
执行查询数据操作:
在这里插入图片描述

7.期间出现的问题:

  1. Call From node2/127.0.0.1 to node2:9000 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused(需要启动当前的Hadoop,才能运行Hive)
  2. FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient(本人出现的问题是没有初始化数据库:./bin/schematool -dbType <db type> -initSchema
  3. 如果出现2中的问题可以使用:schematool -upgradeSchema(如果方法行不通,可以考虑停止当前的Hive,然后等待几秒,重新cd到bin文件中使用hive启动,本人成功过,不知道这是什么bug)

8.总结

1.Hive依赖于Hadoop,必须先启动Hadoop,并且为Hive创建指定的文件,才能使用Hive

2.当前的Hive就是一个类似数据库的东西,可以自定义初始化数据库的类型

3.当初始化当前的Hive数据库类型后,其后面的操作就是该数据库的sql操作,注意以分号“;”结束

以上纯属个人见解,如有问题请联系本人!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值