hive的udf的编写

1.配置环境

1.引入jar包:hive-exec-0.8.0.jar 和 hadoop-core-0.20.2.jar

2.编写udf函数

1.extends UDF
2.重新定义UDF的evaluate函数。
  1. package com.qunar.hiveudf; 
  2. import java.text.SimpleDateFormat; 
  3. import java.util.Calendar; 
  4. import java.util.Date; 
  5.  
  6. import org.apache.hadoop.hive.ql.exec.UDF; 
  7.  
  8. public class IsSundayOrSaturday extends UDF 
  9.     public Boolean evaluate(String dateString) 
  10.     { 
  11.         try  
  12.         { 
  13.             //将string转化为date 
  14.             String str = dateString.split(" ")[0]; 
  15.             SimpleDateFormat sdf= new SimpleDateFormat("yyyy-MM-dd"); 
  16.             Date date =sdf.parse(str); 
  17.              
  18.             //将date转换为calendar 
  19.             Calendar calendar = Calendar.getInstance(); 
  20.             calendar.setTime(date); 
  21.              
  22.             //获取date的星期 
  23.             int week = calendar.get(Calendar.DAY_OF_WEEK)-1
  24.             if(week == 0 || week == 6
  25.             { 
  26.                 return true
  27.             } 
  28.             else  
  29.             { 
  30.                 return false
  31.             }    
  32.         }  
  33.         catch (Exception e)  
  34.         { 
  35.             // TODO: handle exception 
  36.             return false
  37.         } 
  38.     } 
package com.qunar.hiveudf;
import java.text.SimpleDateFormat;
import java.util.Calendar;
import java.util.Date;

import org.apache.hadoop.hive.ql.exec.UDF;

public class IsSundayOrSaturday extends UDF
{
	public Boolean evaluate(String dateString)
	{
		try 
		{
			//将string转化为date
			String str = dateString.split(" ")[0];
			SimpleDateFormat sdf= new SimpleDateFormat("yyyy-MM-dd");
			Date date =sdf.parse(str);
			
			//将date转换为calendar
			Calendar calendar = Calendar.getInstance();
			calendar.setTime(date);
			
			//获取date的星期
			int week = calendar.get(Calendar.DAY_OF_WEEK)-1;
			if(week == 0 || week == 6)
			{
				return true;
			}
			else 
			{
				return false;
			}	
		} 
		catch (Exception e) 
		{
			// TODO: handle exception
			return false;
		}
	}
}

3.将jar包引入hadoop环境

1.将jar放入hive的lib的物理目录下;

2.打开hive客户端,加入jar包
add jar /home/hive/lib/HiveUDF.jar

3.创建一个临时文件
create temporary function IsSundayOrSaturday AS 'com.qunar.hiveudf.IsSundayOrSaturday'

4.调用函数
select IsSundayOrSaturday(intime) from user_tag

注意:

1.如果函数的参数中含有文件,则先要将文件放入hive的运行环境中
add file /home/filename
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值