- 博客(4)
- 资源 (1)
- 收藏
- 关注
转载 hive中UDF的编写
如何编写UDF我就不赘述了,网上资料大把。贴一个参考链接直接略过。 主要讨论两个点,是开发过程中遇到的难点。 1. UDF读取外部资源。 2. 外部资源存放位置。 为什么会遇到这两个问题? 开发UDF的目的就是为了扩展数据库一些没有的功能。常用功能例如count,sum这些,但是偶尔会遇到一些复杂的计算数据库没有直接实现的函数,解决方法一是直接读取数据然后用程序去
2015-07-24 10:57:24 917
转载 hive UDF 分享 通过IP地址获取IDC//省份/城市的信息http://my.oschina.net/wangjiankui/blog/263994
简述: 简单的2分查找算法,根据IP地址定位IP所属的IP段,然后获取IP段的IDC/省份/城市的信息。 输入:IP地理信息文件,一般地址库拿到后需要格式化一下,参考: 1. 如果省份是null 或者 '' ,city是null或者'' =》 省份=其他 and 城市=其他 2. 省份非空且为直辖市,但是城市非直辖市 = 》 城市=直辖市 3. 省份非空
2015-07-23 09:16:59 2816 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人