HIVE
ITrue的天空
这个作者很懒,什么都没留下…
展开
-
HIVE时间函数小结
最近使用HIVE时,经常遇到一些对时间字段进行处理的情况。所以总结了一下HIVE中时间函数,可能不是特别全面,仅供大家交流参考。直至上传这篇小结时,还没有找到处理月份加减的函数,类似ORICLE中的ADD_MONTHS函数,如果你有好的方法,也请多多交流哦。个人之前看了很多有关这方面的总结或者文章,都是以纯文字的方式展现,希望这篇小结可以加深你的印象。关于函数的具体用法,则不是这篇小结的重原创 2017-11-26 19:19:54 · 618 阅读 · 0 评论 -
一个简单的UDF小程序(HIVE)
一个运行于HIVE的简单的UDF程序,可以作为对UDF的一个简单的入门,你自己也可以很容易的亲自实践。主要包括以下步骤: 在hive中建一个测试用例表、编辑UDF的java程序、HIVE中添加JAR包并创建UDF临时函数(1)在hive中建一个测试用例表(当然如果你已经有合适的数据可以跳过这一步)create table littlebigdata(name string,email str...原创 2018-04-27 19:42:16 · 2299 阅读 · 0 评论 -
HIVE Streaming小结
HIVE中的查询可以结合使用非java语言的脚本(比如shell、python、perl等),达到另一种处理数据的方式。下面通过自己亲自实践的测试程序说明Streaming的常见用法:(1)恒等变换(2)改变类型(3)投影变换(4)操作转换(5)使用分布式内存(6)CLUSTER BY、DISTRIBUTE BY、SORT BY(7)计算cogroupStreaming HIVE是通过...原创 2018-04-29 16:19:23 · 4215 阅读 · 1 评论