hive安装教程 mysql_个人整理Hive安装手册(1)--后期不断更新

1.上传tar包

2.解压

tar -zxvf hive-1.2.1.tar.gz

3.安装mysql数据库

推荐yum 在线安装(运行脚本安装)

4.配置hive

(a)配置HIVE_HOME环境变量

vi conf/hive-env.sh

配置其中的$hadoop_home

(b)配置元数据库信息

vi  hive-site.xml

添加如下内容:

javax.jdo.option.ConnectionURL

jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true

JDBC connect string for a JDBC metastore

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

Driver class name for a JDBC metastore

javax.jdo.option.ConnectionUserName

root

username to use against metastore database

javax.jdo.option.ConnectionPassword

root

password to use against metastore database

5.安装hive和mysq完成后,将mysql的连接jar包拷贝到$HIVE_HOME/lib目录下

如果出现没有权限的问题,在mysql授权(在安装mysql的机器上执行)

mysql -uroot -p

设置密码

set password=password('root');

#(执行下面的语句  *.*:所有库下的所有表   %:任何IP地址或主机都可以连接)

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;

FLUSH PRIVILEGES;

通过mysql -uroot -proot

6. Jline包版本不一致的问题,需要拷贝hive的lib目录中jline.2.12.jar的jar包替换掉hadoop中的

6.1、 cp hive/lib/jline-2.12.jar /opt/software/hadoop-2.6.4/share/hadoop/yarn/lib/

6.2、装hive和mysq完成后,将mysql的连接jar包拷贝到$HIVE_HOME/lib目录下

-------------------------------------------------------------------------------------------------------

启动hive

bin/hive

----------------------------------------------------------------------------------------------------

Hive几种使用方式:

1.Hive交互shell      bin/hive

2.Hive JDBC服务(参考java jdbc连接mysql)

3.hive启动为一个服务器,来对外提供服务

bin/hiveserver2

nohup bin/hiveserver2 1>/var/log/hiveserver.log 2>/var/log/hiveserver.err &

启动成功后,可以在别的节点上用beeline去连接

bin/beeline -u jdbc:hive2://mini1:10000 -n root

或者

bin/beeline

! connect jdbc:hive2://mini1:10000

4.Hive命令

hive  -e  ‘sql’

bin/hive -e 'select * from t_test'

创建表:

内部表--删除之后数据全部丢失

CREATE  TABLE [IF NOT EXISTS] table_name

外部表--删除元数据之后源数据还存在

CREATE EXTERNAL TABLE [IF NOT EXISTS] table_name LOCATION hdfs_path

1、结构一样,但是数据不一样  ----like

create table bws like te;

2、结构一样,数据也一样----as

create table bws2 as select * from tes;

设置表结构:一定按照这个顺序来

ROW FORMAT DELIMITED : 行格式分隔

FIELDS TERMINATED BY ’,’ : 字段之间使用空格分隔

COLLECTION ITEMS TERMINATED BY ‘,’ : 集合(就是这的数据)使用逗号分隔

MAP KEYS TERMINATED BY ‘:’ : 键值对使用冒号分隔

LINES TERMINATED BY ‘\t’ : 记录之间使用换行符分隔

Hive 查看表描述

DESCRIBE [EXTENDED|FORMATTED] table_name

extended

formatted

table-type:查看创建表的类型

充:临时表

在当前进程中可以对数据进行相应的操作,但是退出hive时,就自动删除

create TEMPORARY table name-----一定是一张内部表

214f2d6dbd728aba1d10c77ce88944a5.png

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值