启动hiveservice2服务
进入bin
执行 ./hive --service hiveserver2
更换执行引擎
set hive.execution.engine=mr;
–创建数据库
create database if not exists youmeng;
–创建表 以天为维度 (外部表,分区)
create external table if not exists jinghang.hiveerrorlog(
createdAtMs string,
appId string,
deviceId string,
appVersion string,
appChannel string,
appPlatform string,
osType string,
deviceStyle string,
errorBrief string,
errorDetail string,
timesecond string
)
partitioned by(dates string)
row format delimited fields terminated by '\t'
lines terminated by '\n'
stored as textfile
location '/flume';
1:row format delimited fields terminated by '\t' 指定每个字段终止的符号 ‘\t’
2:lines terminated by '\n' 因为加载的是text文件文件中有多行所以要指定分隔符为 \n 为一行数据
3:stored as textfile 指定文件格式
delimited 限定
fields 字段
lines 行
terminated 终止 到 ‘\n’ 终止
location 指定创建的表 存储在hdfs那个目录
往表中插入数据
alter table jinghang.hiveerrorlog add partition (dates="20-0707") location '20-0707';
数据库.表名 add 指定分区名字(dates="") location '加载目录下的数据'
注意:分区名字最好与目录名字一致