关于hive引用正则表达式建表的格式

正则表达式建表只要引用hive的正则包,并且将input的正则式子对数据切分出来的字段和output的%x$s以及你所建表的字段对应起来就好了。

废话不多说,直接上例子了:

create external table test1(
    'ip'    string,
    'username'  string,
    'passwd'    string,
    'time'      string
    )
    partitioned by (date string,filename string)
    roe format serde 'org.apache.hadoop.hive.serde2.RegexSerDe'
    with serdeproperties(
    "input.regex"="正则表达式",
    "output.format.string"="%1$s %2$s..." (ps:和你正则表达式切分出来的字段一一对应)
    );

然后呢,该往这个表load数据了:

load data inpath '/user/hadoop/test.txt' into table test1
partition (date='2017-02-16',filename='xx.txt');

最后呢,建议大家将数据存放到hdfs上再往表中load,最好是建外部表,以防止删除表的时候数据丢失。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值