数据库
文章平均质量分 53
云想慕尘
这个作者很懒,什么都没留下…
展开
-
一个查询ip归属地的hive udf
背景工作中会用到查询ip归属地的场景,购买了ip库数据,因官方不提供数据遍历方案,所以无法全量导入到hive中,只能使用udf进行查询。数据源来自https://www.ipip.net/,数据格式为.ipdb,如:ipv4_china_cn.ipdb。udf编码maven pom.xml<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0"原创 2021-07-01 15:52:10 · 1097 阅读 · 0 评论 -
hive 修改表结构后回溯数据发现新增字段值为空的问题解决方案
问题描述通过alter table 增加字段:ALTER TABLE dw.video_profile CHANGE p_album p_album string AFTER p_content_phrase;ALTER TABLE dw.video_profile CHANGE p_content_quality p_content_quality string AFTER p_album;然后回溯数据,overwrite写到昨日分区,写完后查询发现昨日分区新增的字段中值为空。原因hive原创 2022-03-03 20:35:22 · 2780 阅读 · 0 评论 -
c3p0连接池连接泄漏检测
c3p0连接池连接泄露检测原创 2016-01-09 00:56:48 · 4270 阅读 · 0 评论