hive UDF函数实现时间格式转换

最新推荐文章于 2024-06-26 15:01:42 发布

乔尼娜沙德星

最新推荐文章于 2024-06-26 15:01:42 发布

阅读量700

点赞数

本文链接：https://blog.csdn.net/qq_35315363/article/details/95111215

版权

本文介绍了如何使用Hive自定义UDF（用户定义函数）进行时间格式转换。针对输入数据格式"27.38.5.159"和"31/Aug/2015:00:04:37 +0800"，分别实现了去除双引号和转换日期时间格式的功能，目标格式为20150830000437。通过将Java代码打包成Jar文件并添加到Hive ClassPath，然后在Hive中注册为函数。

摘要由CSDN通过智能技术生成

hive UDF函数实现时间格式转换

需求：

自定义函数UDF
- 数据格式
"27.38.5.159" "31/Aug/2015:00:04:37 +0800"
ip: IP地址 datetime_str: 访问时间
- 两个UDF
去除字段的双引号
转换日期时间格式
20150830000437

public class DateUDF extends UDF {
    public Text evaluate(Text input) {
        String value = input.toString();
        String a = value.replace("\"","");
        SimpleDateFormat inputdate = new SimpleDateFormat("dd/MMM/yyyy:HH:mm:ss", Locale.ENGLISH);
        SimpleDateFormat outputdate = new SimpleDateFormat("yyyyMMddHHmmss");
        String format=null;
        Date date;
        try {
            date = inputdate.parse(a);
             format = outputdate.format(date);
        } catch (ParseException e) {
            e.printStackTrace();
        }

        return new