随机删除重复记录!

--------------    随机删除重复记录!  -----------------------------
--
------------    Author: Luoyoumou   -----------------------------

drop table test;
--先求出符合条件的记录:
create table test(col1 int identity(1,1), col2 varchar(10), col3 varchar(10));

insert into test(col2, col3)
select '我要银子','我没有' UNION ALL
select '我要银子','你有没?' UNION ALL
select '我要金子','金子涨价了' UNION ALL
select '多要银元','我没有' UNION ALL
select '我要银子','我没有' UNION ALL
select '我要银子', '你有没?' UNION ALL
select '我要银子', '明年才有' UNION ALL
select '我要银子', '你有没?'

select * from test;
select distinct col2, col2 from test;


select t1.all_sum as '所有记录行',
       t2.dis_sum
as '无重复记录行',
       t1.all_sum
-t2.dis_sum as '将要删除的行数'
from (select count(*) as all_sum from test ) t1,
(
select count(*) as dis_sum from (select distinct col2, col3 from test) t) t2;


---如:随机删除 col2='我要银子'  的重复记录
select sum(row_sum) as all_del from (
select col2, col3, count(col1)-1 as 'row_sum'
from test
where col2='我要银子'
group by col2, col3
having count(col1)-1<>0) t1

--删除条件:将col2、col3都相同的,视为重复记录,将其随机删除指定条件(col2='我要银子')的重复记录,只剩一行
--
选择语句:
select top (select sum(row_sum) as all_del from (
            
select col2, col3, count(col1)-1 as 'row_sum'
           
from test
           
where col2='我要银子'
           
group by col2, col3
           
having count(col1)-1<>0) t1)
    t1.col1, t1.col2, t1.col3
   
from test t1 where t1.col2='我要银子' and t1.col1 not in
  (
select col1 from test t3 where exists (
                    
select col2, col3
                    
from test where col2='我要银子'
                    
and col2=t3.col2 and col3=t3.col3
                    
group by col2, col3 having count(col1)=1 ))
order by NEWID()


--删除语句:  将其随机删除(col2='我要银子'的重复记录)只剩一行
DELETE FROM test
WHERE col1 in ( select col1 from (
select top (select sum(row_sum) as all_del from (
            
select col2, col3, count(col1)-1 as 'row_sum'
           
from test
           
where col2='我要银子'
           
group by col2, col3
           
having count(col1)-1<>0) t1)
    t1.col1, t1.col2, t1.col3
   
from test t1 where t1.col2='我要银子' and t1.col1 not in
  (
select col1 from test t3 where exists (
                    
select col2, col3
                    
from test where col2='我要银子'
                    
and col2=t3.col2 and col3=t3.col3
                    
group by col2, col3 having count(col1)=1 ))
order by NEWID()) t
)


--删除语句:  将其随机删除所有重复的记录,每组重复记录只剩一行
DELETE FROM test
WHERE col1 in ( select col1 from (
select top (select sum(row_sum) as all_del from (
            
select col2, col3, count(col1)-1 as 'row_sum'
           
from test
           
group by col2, col3
           
having count(col1)-1<>0) t1)
    t1.col1, t1.col2, t1.col3
   
from test t1 where t1.col1 not in
  (
select col1 from test t3 where exists (
                    
select col2, col3
                    
from test where col2=t3.col2 and col3=t3.col3
                    
group by col2, col3 having count(col1)=1 ))
order by NEWID()) t
)

使用优化算法,以优化VMD算法的惩罚因子惩罚因子 (α) 和分解层数 (K)。 1、将量子粒子群优化(QPSO)算法与变分模态分解(VMD)算法结合 VMD算法背景: VMD算法是一种自适应信号分解算法,主要用于分解信号为不同频率带宽的模态。 VMD的关键参数包括: 惩罚因子 α:控制带宽的限制。 分解层数 K:决定分解出的模态数。 QPSO算法背景: 量子粒子群优化(QPSO)是一种基于粒子群优化(PSO)的一种改进算法,通过量子行为模型增强全局搜索能力。 QPSO通过粒子的量子行为使其在搜索空间中不受位置限制,从而提高算法的收敛速度与全局优化能力。 任务: 使用QPSO优化VMD中的惩罚因子 α 和分解层数 K,以获得信号分解的最佳效果。 计划: 定义适应度函数:适应度函数根据VMD分解的效果来定义,通常使用重构信号的误差(例如均方误差、交叉熵等)来衡量分解的质量。 初始化QPSO粒子:定义粒子的位置和速度,表示 α 和 K 两个参数。初始化时需要在一个合理的范围内为每个粒子分配初始位置。 执行VMD分解:对每一组 α 和 K 参数,运行VMD算法分解信号。 更新QPSO粒子:使用QPSO算法更新粒子的状态,根据适应度函数调整粒子的搜索方向和位置。 迭代求解:重复QPSO的粒子更新步骤,直到满足终止条件(如适应度函数达到设定阈值,或最大迭代次数)。 输出优化结果:最终,QPSO算法会返回一个优化的 α 和 K,从而使VMD分解效果最佳。 2、将极光粒子(PLO)算法与变分模态分解(VMD)算法结合 PLO的优点与适用性 强大的全局搜索能力:PLO通过模拟极光粒子的运动,能够更高效地探索复杂的多峰优化问题,避免陷入局部最优。 鲁棒性强:PLO在面对高维、多模态问题时有较好的适应性,因此适合海上风电时间序列这种非线性、多噪声的数据。 应用场景:PLO适合用于优化VMD参数(α 和 K),并将其用于风电时间序列的预测任务。 进一步优化的建议 a. 实现更细致的PLO更新策略,优化极光粒子的运动模型。 b. 将PLO优化后的VMD应用于真实的海上风电数据,结合LSTM或XGBoost等模型进行风电功率预测。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值