某字段内字符串去重

最新推荐文章于 2024-07-12 15:06:15 发布
最新推荐文章于 2024-07-12 15:06:15 发布
阅读量1.8k 收藏 3
点赞数
分类专栏： Oracle 文章标签： Oracle
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yaiger/article/details/81280108
版权

与传统的数据去重不同，这是一个字段内的字符串有大量重复内容，需要去重

比如字段内容为：aa,bb,cc,dd,ab,aa,cc,dd

去重后的结果为：aa,bb,cc,dd,ab

回复于 2018-07-25 15:55:26 #5 得分：100

模拟SQL:

  1. SELECT 唯一字段,
  2.        LISTAGG(COLUMN_DISTINCT, ',') WITHIN GROUP(ORDER BY COLUMN_DISTINCT) AS 去重字段
  3.   FROM (SELECT DISTINCT 唯一字段, COLUMN_DISTINCT
  4.           FROM (SELECT 唯一字段,
  5.                        REGEXP_SUBSTR(去重字段, '[^,]+', 1, lv) COLUMN_DISTINCT
  6.                   FROM table,
  7.                        (SELECT LEVEL lv FROM dual CONNECT BY LEVEL < 10) b
  8.                  WHERE b.lv <= REGEXP_COUNT(去重字段, '\,') + 1
  9.                  ORDER BY 唯一字段))
  10.  GROUP BY 唯一字段;
yaiger
关注
专栏目录
【PostgreSQL】PostgreSQL字段逗号拼接的字符串中去重、PostgreSQL数组去重
tttzzzqqq2018的博客
10-10 1165
【代码】PostgreSQL字段逗号拼接的字符串中去重。PostgreSQL数组去重。
python字符串去重 保留第一次出现的_python 列表和字符串
weixin_39534395的博客
12-06 1999
python 列表中保留所有字符串前三项，并保存到一个新的列表l = [s[:3] for s in data]python 在列表中查找包含所以某个字符串的项，并保存到一个新的列表l = [s for s in data if 'FF' in s]方法一：list1 = ['a','b','c']list3 = list1list2 = ['a']for i in list2:list3.rem...
去除重复字符串
10-26
去除重复字符串
mysql的表内字段去重
lianyutao的专栏
09-26 756
找了一个靠普的表内去重的方法，记录一下。 delete afrom analysefault a left join(select (id) from analysefault group by faultcode,hardname)b on a.id=b.idwhere b.id is null
SQL去重的四种方法
qq_37772593的博客
07-12 1961
原理：先根据要去重的字段姓名，和唯一字段时间，拿到最后一个值，然后根据这个值，作为链接查询的关系，自连，从而完成拿到最后一条数据。作用：只能一列去重，当distinct后跟大于1个参数时，他们之间的关系是&&(逻辑与)关系，只有全部条件相同才会去重。作用：先根据重复列进行分组，分组后再进行排序，不同的组序号为1，相同的组序号为2，排除为2的就达到了去重效果。注意点：这样去除之后的数据是保留的第一条重复的数据，如果想保留最后一条数据，将min()改成max()代码：一张表a，开始时间是b，用户姓名c。
字符串去重
csdn_chenz的博客
06-28 988
string group = string.Empty; foreach (SPListItem item in items) { group += ',' + item["专项组名"].ToString(); } group = group.Substring(1);//去掉第一个"," group = String.Join(",", gro...
Hive 典型的中表内数据除重写法
热门推荐
limao314的专栏
11-04 1万+
insert overwrite table store select t.p_key,t.sort_word from ( select p_key, sort_word , row_number()over(distribute by p_key sort by sort_word) as rn from store) t
SQL Server 将某一列的值拼接成字符串.docx
11-07
在SQL Server中，将某一列的值拼接成字符串是一个常见的需求，这通常涉及到数据的格式化输出，比如创建报告或者导出数据。这个过程可以通过几种不同的方法来实现，其中包括使用FOR XML PATH子句和CONCAT函数。我们将...
mysql 数据去重的三种方式[实战]
m0_52789121的博客
07-30 2254
先自我介绍一下，小编13年上师交大毕业，曾经在小公司待过，去过华为OPPO等大厂，18年进入阿里，直到现在。如果DISTINCT关键字后有多个字段，则会对多个字段进行组合去重，也就是说，只有多个字段组合起来完全是一样的情况下才会被去重。最近在和系统模块做数据联调，其中有一个需求是将两个角色下的相关数据对比后将最新的数据返回出去，于是就想到了去重，再次做一个总结。可以看到查询结果返回了10条记录，其中有一些重复的age值，有时出于对数据分析的要求，需要消除重复的记录值。二、数据去重三种方法使用。...
Python利用正则表达式匹配并截取指定子串及去重的方法
10-23
主要介绍了Python利用正则表达式匹配并截取指定子串及去重的方法,涉及Python正则表达式匹配及字符串截取操作的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下
任意字符串去重
雨季的博客
12-20 565
  package com.duplicateRemoval; public class DuplicateRemoval { public static void main(String[] args) { String[] oldArray = new String[] { "xxx", "rrrr", "xxx", "eeee", "dd", "wwww", &quot
去除字符串中的重复字符——方法汇总和性能测试
了不起的董二狗
07-31 1152
Design an algorithm and write code to remove the duplicate characters in a string without using any additional buffer. NOTE: One or two additional variables are fine. An extra copy of the array is not.
两个数组根据指定字段去重
weixin_30790841的博客
05-14 437
const disDuplicate = (oldList, newList, field) => { let list = [], tempObj = {}, allList = [] allList = allList.concat(oldList, newList) for (let i = 0, len = all...
Go--二维数组去重
Huifeng Tang 的博客
01-24 1731
二维数组去重前言Code 前言 我们需要一个元素唯一的二维数组，但是这个二维数组在处理前是有重复元素的，这个时候我们就要对其进行去重 [[1,2,3],[1,2,2,],[1,2,3]] //其中[1,2,3]出现了两次 需要对这个二维数组进行去重 去重… 处理成: [[1,2,3],[1,2,2]] Code package main import ( "fmt" "reflec...
Go 语言二维数组和多维数组去重
qq_35115251的博客
03-09 676
网上只有基于 map 的一维数组去重，找不到二维数组去重的办法。所以我基于 map 和 json 序列化实现了二维数组的去重，效率方面没有仔细测试，仅供参考。 var ans [][]int /** 添加元素 **/ m := make(map[string]struct{}) for i := 0; i < len(ans1); i++ { marshal, _ := json.Marshal(ans[i]) // go 序列化后是 byte[]，需要转成 string .
数据去重（包括字符串，对象）
July_sal的专栏
10-15 340
服务器获取到的数据 去重（包括字符串，对象） 1.字符串数组去重 1）利用NSDictionary的AllKeys（AllValues）方法 NSArray *dataArray = @[@"2014-04-01",@"2014-04-02",@"2014-04-03",                            @"2014-04-01",@"2014-04-02",@"20.
pd.merge 结果出现重复_COUNTIFS函数技巧之去重复值计数（思路分析，过程详解）...
weixin_39601794的博客
12-10 1063
各位读者朋友们大家好，今天给大家介绍COUNTIFS函数的技巧性用法一，去除重复值计数。何为去除重复值计数呢？简单来说，当我们的数据源中存在重复值时，而我们只想将重复值计算一次，来计算不重复的项目有多少个。比如我们的统计表中每个人会对应一个部门，但是一个部门肯定是有多个员工存在，就会有一个部门出现多次的情况出现，而我们要想知道总共有多少个部门，这该如何处理呢？第一步：当我们无从下手的时候，我们看题...
go 实现数组的 交集、并集、差集、补集、拆分、去重，排列组合 n个元素取m个， 笛卡尔积算法
山人自有妙计
07-21 2979
最近项目中正好用到了求两个数组的补集和数组的排列组合，干脆将想到的可能用到的算法都实现下，方便以后使用。 //////////////////////////////////////////////////////////////////////// // Copyright(c) // Moudle: Slice 算法.go // Author: cjj // Created: ////////////////////////////////////////////////////////////.
MySQL查询时将字符串去重后拼接一起显示
最新发布
09-11
在MySQL中，如果你想从查询结果中去除重复的字符串并将其拼接成一个新的字段显示出来，可以使用GROUP_CONCAT函数配合DISTINCT关键字。GROUP_CONCAT将分组后的每个唯一值连接成一个字符串，而DISTINCT确保只选取不重复的记录。 例如，假设你有一个名为`orders`的表，其中有一个列叫做`product_name`，你可以使用如下SQL查询： ```sql SELECT product_name, GROUP_CONCAT(DISTINCT product_name ORDER BY product_name) as unique_product_names FROM orders GROUP BY product_id; ``` 这个查询会按`product_id`分组，对每个组内的`product_name`进行去重，并按照`product_name`排序后，把每个组的所有独特产品名用逗号分隔拼接在一起。 如果你希望自定义分隔符，可以在GROUP_CONCAT后面添加`SEPARATOR`，比如： ```sql SELECT product_name, GROUP_CONCAT(DISTINCT product_name ORDER BY product_name SEPARATOR ';') as unique_product_names FROM orders GROUP BY product_id; ``` 这将使用分号作为分隔符。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值