Github|类别不平衡学习资源(下)

点击上方“算法猿的成长“,关注公众号,选择加“星标“或“置顶”

总第 139 篇文章,本文大约 3600 字,阅读大约需要 10 分钟

继续介绍类别不平衡学习资源,github 地址:

https://github.com/ZhiningLiu1998/awesome-imbalanced-learning

上篇文章地址:

Github|类别不平衡学习资源(上)

另外,完整版阅读可以到我的知乎专栏:https://zhuanlan.zhihu.com/p/142692473

这次介绍的是下面目录加粗的内容:

  • 代码库/框架

    • Python

    • R

    • Java

    • Scalar

    • Julia

  • 论文

    • 综述

    • 深度学习

    • 数据重采样(Data resampling)

    • 成本敏感学习(Cost-sensitive Learning)

    • 集成学习(Ensemble Learning)

    • 异常检测

  • 其他

    • 不平衡数据库

    • 其他的资源

另外,带有???? 标记的是作者特别推荐的重要或者高质量的论文和框架。


数据重采样
  • 过采样

    • ROS [Code] - 随机过采样

    • SMOTE [Code] (2002, 9800+ 引用) ,合成少数类的过采样技术(Synthetic Minority Over-sampling TEchnique)

      ???? 经典的工作

    • Borderline-SMOTE [Code] (2005, 1400+ 引用) ,边界合成少数类的过采样技术;

    • ADASYN [Code] (2008, 1100+ 引用) ,自适应合成采样(ADAptive SYNthetic Sampling);

    • SPIDER [Code (Java)] (2008, 150+ 引用) ,不平衡数据的选择性预处理;

    • Safe-Level-SMOTE [Code (Java)] (2009, 370+ 引用) ,安全级综合少数类的过采样技术;

    • SVM-SMOTE [Code] (2009, 120+ 引用) ,基于 SVM 的 SMOTE

    • SMOTE-IPF (2015, 180+ 引用) ,迭代分区过滤的 SMOTE

  • 欠采样

  • RUS [Code],随机欠采样;

  • CNN [Code] (1968, 2100+ 引用) ,浓缩的最近邻(Condensed Nearest Neighbor);

  • ENN [Code] (1972, 1500+ citations) ,可编辑的浓缩的最近邻(Edited Condensed Nearest Neighbor);

  • TomekLink [Code] (1976, 870+ citations) ,Tomek 对浓缩的最近邻的修正方法;

  • NCR [Code] (2001, 500+ 引用) , 近邻的清洗规则;

  • NearMiss-1 & 2 & 3 [Code] (2003, 420+ 引用) ,几种解决不平衡数据分布的 KNN 方法

  • CNN with TomekLink [Code (Java)] (2004, 2000+ 引用) ,结合了浓缩的最近邻和 TomekLink 方法;

  • OSS [Code] (2007, 2100+ 引用):单边选择(One Side Selection);

  • EUS (2009, 290+ 引用) :进化的欠采样(Evolutionary Under-sampling);

  • IHT [Code] (2014, 130+ 引用) :实例难度阈值(Instance Hardness Threshold);

  • 混合采样

  • SMOTE-Tomek & SMOTE-ENN (2004, 2000+ 引用) [Code (SMOTE-Tomek)] [Code (SMOTE-ENN)]  ,综合少数过采样技术和 Tomek 对压缩近邻/编辑近邻的修改;

    ????广泛的实验评估涉及10种不同的过/欠采样方法。

  • SMOTE-RSB (2012, 210+ 引用) ,混合了使用 SMOTE 预处理和粗糙集合理论;

成本敏感学习
  • CSC4.5 [Code (Java)] (2002, 420+ 引用) ,一个实际加权方法来引起成本敏感树;

  • CSSVM [Code (Java)] (2008, 710+ 引用) ,用于高度不平衡分类的成本敏感 SVMs;

  • CSNN[Code (Java)] (2005, 950+ 引用) ,基于解决类别不平衡问题的方法来训练一个成本敏感的神经网络;

集成学习
  • Boosting-based

    • AdaBoost[Code] (1995, 18700+ 引用)

    • DataBoost (2004, 570+ 引用)

    • SMOTEBoost [Code] (2003, 1100+ 引用)

      ???? 经典的工作

    • MSMOTEBoost(2011, 1300+ 引用)

    • RAMOBoost [Code] (2010, 140+ 引用)

    • RUSBoost[Code]  (2009, 850+ 引用)

???? 经典的工作

  • AdaBoostNC (2012, 350+ 引用)

  • EUSBoost (2013, 210+ 引用)

  • bagging-based

    • Bagging [Code] (1996, 23100+ 引用) ,Bagging 预测器;

    • OverBagging & UnderOverBagging & SMOTEBagging & MSMOTEBagging [Code (SMOTEBagging)] (2009, 290+ 引用) ,基于 Bagging 的随机过采样/随机混合重采样/ SMOTE / 修改版 SMOTE;

    • UnderBagging [Code] (2003, 170+ 引用) ,基于 Bagging 的随机欠采样;

  • 其他继承方法

  • EasyEnsemble & BalanceCascade[Code (EasyEnsemble)] [Code (BalanceCascade)]  (2008, 1300+ 引用) , 使用 RUS 进行并行集成训练(EasyEnsemble) / 使用 RUS 进行级联集成训练,同时迭代地删除分类很好的样本(BalanceCascade);

    ???? 简单但有效的方法

  • Self-paced Ensemble [Code] (ICDE 2020) ,用自适应协调分类困难训练不平衡数据的有效集成;

    ???? 高性能和计算效率高,广泛适用于不同的分类器。

异常检测
  • Anomaly Detection Learning Resources,异常检测相关的书籍、论文、视频和工具箱。

  • 综述

    • Anomaly detection: A survey (2009, 7300+ 引用)

  • A survey of network anomaly detection techniques (2017, 210+ 引用)

  • 基于分类

    • One-class SVMs for document classification (2001, 1300+ 引用)

    • One-class Collaborative Filtering (2008, 830+ 引用)

    • Isolation Forest (2008, 1000+ 引用)

    • Anomaly Detection using One-Class Neural Networks (2018, 70+ 引用)

    • Anomaly Detection with Robust Deep Autoencoders (KDD 2017, 170+ 引用)


其他

不平衡数据集

上述数据集的集合来自 imblearn.datasets.fetch_datasets

其他资源
  • Paper-list-on-Imbalanced-Time-series-Classification-with-Deep-Learning

  • acm_imbalanced_learning ,2016年4月27日在德克萨斯州奥斯汀市举行的ACM不平衡学习讲座的幻灯片和代码;

  • imbalanced-algorithms ,基于python实现的算法学习不平衡的数据;

  • imbalanced-dataset-sampler ,一种(PyTorch)非平衡数据集采样器,用于过采样低频率类和欠采样高频率类;

  • class_imbalance ,通过 Jupyter Notebook 展示的二进制分类的类别不平衡;


最后,github 地址是:

https://github.com/ZhiningLiu1998/awesome-imbalanced-learning

另外,本人水平有限,所以对部分专业术语的翻译可能并不正确,没法做到非常完美,请多多包涵,谢谢!

最后,如果想查看完整版,以及可以点击论文或者代码链接的,可以查看我发表在知乎上的文章:

https://zhuanlan.zhihu.com/p/142692473


精选AI文章

1.  2020年计算机视觉学习指南

2. 是选择Keras还是PyTorch开始你的深度学习之旅呢?

3. 编写高效的PyTorch代码技巧(上)

4. 编写高效的PyTorch代码技巧(下)

5. 深度学习算法简要综述(上)

6. 深度学习算法简要综述(下)

7. 10个实用的机器学习建议

8. 实战|手把手教你训练一个基于Keras的多标签图像分类器

精选python文章

1.  python数据模型

2. python版代码整洁之道

3. 快速入门 Jupyter notebook

4. Jupyter 进阶教程

5. 10个高效的pandas技巧

精选教程资源文章

1. [资源分享] TensorFlow 官方中文版教程来了

2. [资源]推荐一些Python书籍和教程,入门和进阶的都有!

3. [Github项目推荐] 推荐三个助你更好利用Github的工具

4. Github上的各大高校资料以及国外公开课视频

5. GitHub上有哪些比较好的计算机视觉/机器视觉的项目?

欢迎关注我的微信公众号--算法猿的成长,或者扫描下方的二维码,大家一起交流,学习和进步!

 

如果觉得不错,在看、转发就是对小编的一个支持!

  • 0
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

spearhead_cai

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值