HiveQL常用语句

1.HiveQL官方说明地址

LanguageManual DDL - Apache Hive - Apache Software Foundation

2.操作数据库

2.1查看数据库(default为默认的数据库)

show databases;

2.2创建数据库

create database database_name

2.3删除数据库

drop database database_name;

2.4使用数据库(重新执行2.1命令,创建student_db库)

use database_name;

3.表操作

3.1查看表(由于新建的student_db数据库,故显示表为空)

3.2创建表

(1)常用创表语句

CREATE [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name --EXTERNAL:创建外部表时使用
[(col_name data_type [COMMENT col_comment], ...)] 
[COMMENT table_comment] 
[PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)] --创建分区表时,指定需要分区的字段
[CLUSTERED BY (col_name, col_name, ...) --创建分桶表时使用
[SORTED BY (col_name [ASC|DESC], ...)] INTO num_buckets BUCKETS] 
[ROW FORMAT row_format]   row format delimited fields terminated by --“指定字段之间的分隔符”
[STORED AS file_format] 
[LOCATION hdfs_path] ;--指定表的存储路径(HDFS上的路径)

(2)创建临时表

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name

  LIKE existing_table_or_view_name

  [LOCATION hdfs_path];

(3)创建student_info表

CREATE TABLE STUDENT_INFO(
ID INT,
NAME STRING,
AGE INT,
SUBJECT ARRAY<STRING>,
SCORE MAP<STRING,FLOAT>,
HOME_ADDRESS STRUCT<ADDRESS_CODE:INT,ADDRESS_NAME:STRING>,
UPDATE_TIME DATE
)
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY "\t" 
COLLECTION ITEMS TERMINATED BY '-' 
MAP KEYS TERMINATED BY ':' 
LINES TERMINATED BY '\n'; 

说明:

ROW FORMAT DELIMITED --分隔符开始语句
FIELDS TERMINATED BY "\t" --字段之间以制表符分隔
COLLECTION ITEMS TERMINATED BY '-' --数组和结构体各个数据之间以横杠分隔
MAP KEYS TERMINATED BY ':' --MAP的KEY和VALUE之间以冒号分隔
LINES TERMINATED BY '\n'; --行之间以换行符分隔

3.3查看表描述信息

desc formatted table_name;

3.4删除表

drop table table_name;

4.数据操作

4.1从本地向表中加载数据

(1)源数据

(2)加载数据命令:LOAD DATA LOCAL INPATH 'local_filepath' INTO TABLE table_name;

(3)查询结果,数据加载成功

注:SCORE的值定义为FLOAT类型,源数据中含有INT类型数据,查询结果中,自动补充一位数字0

4.2从HDFS上的文件向表中加载数据

(1)源数据

(2)上传student_info_addsrc.txt文件到hdfs上

(3)加载数据命令:LOAD DATA  INPATH 'hdfs_filepath' INTO TABLE table_name

(4)查询结果,数据加载成功

 4.3加载数据小结见图片

4.4删除数据

HiveQL中没有delete语句,删除数据需要用truncate语句:truncate table table_name;

5.复合数据类型查询

(1)array类型字段查询:array_name[index]

(2)MAP类型字段查询:map_name["键"]

(3)struct类型字段查询:struct_name."键"

  • 37
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
1.上传tar包 2.解压 tar -zxvf hive-1.2.1.tar.gz 3.安装mysql数据库 推荐yum 在线安装 4.配置hive (a)配置HIVE_HOME环境变量 vi conf/hive-env.sh 配置其中的$hadoop_home (b)配置元数据库信息 vi hive-site.xml 添加如下内容: javax.jdo.option.ConnectionURL jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true JDBC connect string for a JDBC metastore javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver Driver class name for a JDBC metastore javax.jdo.option.ConnectionUserName root username to use against metastore database javax.jdo.option.ConnectionPassword hadoop password to use against metastore database 5.安装hive和mysq完成后,将mysql的连接jar包拷贝到$HIVE_HOME/lib目录下 如果出现没有权限的问题,在mysql授权(在安装mysql的机器上执行) mysql -uroot -p #(执行下面的语句 *.*:所有库下的所有表 %:任何IP地址或主机都可以连接) GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION; FLUSH PRIVILEGES; 6. Jline包版本不一致的问题,需要拷贝hive的lib目录中jline.2.12.jar的jar包替换掉hadoop中的 /home/hadoop/app/hadoop-2.6.4/share/hadoop/yarn/lib/jline-0.9.94.jar 启动hive bin/hive ---------------------------------------------------------------------------------------------------- Hive几种使用方式: 1.Hive交互shell bin/hive 2.Hive JDBC服务(参考java jdbc连接mysql) 3.hive启动为一个服务器,来对外提供服务 bin/hiveserver2 nohup bin/hiveserver2 1>/var/log/hiveserver.log 2>/var/log/hiveserver.err & 启动成功后,可以在别的节点上用beeline去连接 bin/beeline -u jdbc:hive2://mini1:10000 -n root 或者 bin/beeline ! connect jdbc:hive2://mini1:10000 4.Hive命令 hive -e ‘sql’ bin/hive -e 'select * from t_test'
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值