AN AGNOSTIC APPROACH TO FEDERATED LEARNING WITH CLASS IMBALANCE

         本地分布和全局分布有可能是不一致的——本地的少数类有可能是全局的多数类。出于隐私考虑,又不能暴露本地分布。

        To overcome the aforementioned challenges, we propose a constrained learning formulation to handle the class imbalance issue in FL while accounting for both heterogeneity and privacy. In brief, we impose constraints on the standard FL formulation so that the empirical loss on every client should not overly exceed the average empirical loss. Such constraints are shown to force the classifier to account for all classes equally and hence mitigate the detrimental effect of class imbalance, under a type of heterogeneous data configuration that captures the mismatch between the local and global imbalance.

        这篇论文的核心就是他不管分布信息,以一种Agnostic的方式来面对Class Imbalance in FL。

论文提出: 

(是不是有点像Fedprox?)

接下来通过拉格朗日乘子来求解,数学看不懂。

论文的实验设置有些新奇:

 他的 Imbalance Ratio是自己定义的,而不是像大家约定的那样

 

 论文的理论性比较强,但我感觉效果上应该不太行的。换个设置估计就不行了。但是并不妨碍中了顶会。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值