hive如何全角转半角？

最新推荐文章于 2022-05-09 17:08:27 发布
最新推荐文章于 2022-05-09 17:08:27 发布
阅读量3.2k 收藏
点赞数
分类专栏： 开发技巧 文章标签： hive 数据仓库 全角
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010013394/article/details/121166297
版权
在处理数据仓库中的文本时，遇到了全角字符转半角的需求。由于Hive本身不提供直接的转换函数，因此需要通过编写替换表达式的方式来实现这个功能。参照全角与半角的对应关系表，经过操作，成功实现了全角到半角的转换。
摘要由CSDN通过智能技术生成

背景

工作中，要处理全角转半角的文本。但是hive 没有自带处理全角转半角的方法。

方案

只能手动写替换表达式实现。

全角与半角对照表：
https://blog.csdn.net/huanghaocs/article/details/90384163

实现

SELECT "ａｂｃ１２　３４５" AS old,
CASE 
WHEN regexp_extract("ａｂｃ１２　３４５", '[\\uFF01-\\uFF60]+', 0) != '' 
THEN regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace(
regexp_replace
最低0.47元/天 解锁文章
towen-Xie
关注
专栏目录
Python实现全角与半角相互转换
技术的点点滴滴
05-20 7282
全角与半角转换在处理汉语语料中会经常出现，这里分别说明汉字、数字、字母的unicode编码范围。以及全角与半角的转换方法。最后给出wiki上全角和半角的编码对照表。 汉字的判断 汉字的unicode编码范围 u4e00 到 u9fa5。 def is_chinese(uchar): """判断一个unicode是否是汉字""" if uchar >= u'\u4e00' an...
hive 多重替换，全角转半角
superALO的博客
04-08 3782
操作hive中，遇到oracle的to_single_byte()函数，发现hive中不支持该函数，查看文章发现有直接sql进行多重替换 和 先在程序中进行处理两种方法。 此处，参考其他博主文章，发现一种多重嵌套sql方法，不过有一处需要进行修改，不易查找 SELECT "ａｂｃ１２；　３４５" AS old, CASE WHEN regexp_extract("ａｂｃ１２；　３４５", '[\\uFF01-\\uFF60]+', 0) != '' THEN regexp_repl...
全角转半角函数
HighGO
05-09 936
瀚高数据库 目录 环境 文档用途 详细信息 环境 系统平台：银河麒麟U系（CPU飞腾）4 版本：4.5 文档用途 将全角字符数字等转换为半角。 详细信息 ---全角转半角函数如下 CREATE OR REPLACE FUNCTION convertstring(text) RETURNS text AS $$ DECLARE len INTEGER; DECLARE retval text; DECLARE tmp text; DECLARE asciival INT4; B
把全角数字（及字母）转换成半角数字
yy13210520的专栏
04-10 2799
<br />下属各部门报来的总结材料中，其中的数字，有的是全角格式的，有的是半角格式的，看起来很不规范，我们将其统一转换成半角字符吧：按下“Ctrl+A”组合键选中全文，执行“格式→更改大小写”命令，打开“更改大小写”对话框（如图2），选中其中的“半角”选项，“确定”一下就成了。 
字符串的全角半角转换 java
03-11
在Java编程中，字符串的全角半角转换是一项常见的需求，尤其在处理用户输入或文本显示时。全角字符和半角字符的区别在于他们的宽度和编码方式。全角字符（全宽度字符）通常用于东亚语言，如中文、日文、韩文等，每个...
hive函数大全（中文版）
05-02
4. 指定格式日期转UNIX时间戳函数: unix_timestamp 18 5. 日期时间转日期函数: to_date 19 6. 日期转年函数: year 19 7. 日期转月函数: month 19 8. 日期转天函数: day 19 9. 日期转小时函数: hour 20 10. 日期转...
Hive中遇到全角
weixin_30530939的博客
01-07 1749
今天在梳理银行SQL业务的时候出现了一个全角的问题：两个种代码 都可以 使用了UDF函数解决 package 广发; import org.apache.hadoop.hive.ql.exec.Description; import org.apache.hadoop.hive.ql.exec.UDF; @Description( name = "全角转化半...
皱建老师的SQL全角/半角转换
宛如秋水
04-16 678
if   exists   (select   *   from   dbo.sysobjects   where   id   =   object_id(N[dbo].[f_convert])   and   xtype   in   (NFN,   NIF,   NTF))     drop   function   [dbo].[f_convert]     GO     
全角和半角互相转换函数
weixin_34344403的博客
07-02 176
oracle 10g中，全角和半角互相转换函数： 1、全角转半角 To_single_byte(全角字符)-->半角字符 2、半角转全角 To_multi_byte(半角字符)-->全角字符 转载于:https://www.cnblogs.com/kakaxu/archive/2008/07/02/1233914.html...
全角转半角方法
爱码僧的博客
02-15 1166
// 全角转半角的 转换函数 public static final String full2HalfChange(String fullStr) throws UnsupportedEncodingException { if (isNULLString(fullStr)) { return fullStr; } fullStr = stringToUnicode(...
字符串操作-随机字符串, 全角转换为半角
Websites
04-27 945
提供一些项目中常用的字符串操作功能包括：截取字符串长度、输出转换、随机字符串、全角半角转换、字符集转换、邮箱格式验证、数字转文件大小.
全角转半角
日々精進
01-26 733
/// /// 全角转半角,(中文符号转英文符号)(DBC case) /// /// 任意字符串 /// 半角字符串 private String ToDBC(String input) { char[] c = input.ToCharArray(); for (int i = 0; i { if (c[i] == 12288) { c[i] = (char)32
全角半角转换，刚刚那个只是全角转半角
阿拉平平的专栏
08-31 913
#region 全角半角转换         ///         /// 转全角的函数(SBC case)         ///         /// 任意字符串         /// 全角字符串         ///         ///全角空格为12288，半角空格为32         ///其他字符半角(33-126)与全角(65281-65374)的对应
字段中的全角数字转换为半角数字
flynetcn的专栏
06-05 1721
建立函数create function changestr (@s varchar(100))     returns varchar(100) as   --字符串中的全角数字转换为半角数字   begin     set   @s   =   replace(@s,０,0)     set   @s   =   replace(@s,１,1)     set   @s   = 
全角字符与半角字符转换
weixin_42979149的博客
12-18 557
半角字符转全角 function ToDBC(txtstring) { var tmp = ""; for(var i=0;i<txtstring.length;i++) { if(txtstring.charCodeAt(i)==32) { tmp= tmp+ String.fromCharCode(12288); } else if(txtstring.charCodeAt(i)<127)
全角字符转半角字符
这里是标题
07-09 2329
全角字符转半角字符     中文中的标点符号一般都是用全角字符表示的，也就是说用了两个英文字符的位置，这和普通汉字是一致的。英文标点则是用的一个字符的位置。有时，需要把一些全角字符(标点，等)转换为英文的半角字符，怎么转呢，如下: 规则：     半角字符的 unicode 编码 始末为：33~126     对应全角的unicode 编码始末为：65281~65374     空格 为...
MaxCompute UDF系列之全角转半角
weixin_34130389的博客
08-11 399
我们在做文本挖掘处理的时候，需要经常把全角字符转成半角处理，今天为大家提供一个全角转半角的MaxComputeUDF，下载地址见附件。 效果如下： MaxCompute UDF代码如下： package com.yinlin.udf.dev; import com.aliyun.odps.udf.UDF; //import org.apach...
如何检查Hive服务的状态？
最新发布
09-26
要检查Hive服务的状态，通常涉及两个部分：HiveServer2和Metastore服务。 1. 检查HiveServer2状态[^1]: - 如果你正在使用Hive的命令行工具`beeline`，可以运行以下命令来查看HiveServer2的状态： ``` beeline -u...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值