2019 Interspeech CycleGAN-based Emotion Style Transfer as Data Augmentation for SER

利用:Cycle consistent adversarial networks (CycleGAN)
目的:addressing the data scarcity problem in speech emotion recognition
(1)在 CycleGAN的基础上从大型的unlabeled 语音数据库 迁移特征 到合成的特征表示。
(2)扩展了 CycleGAN:用分类loss which improves the discriminability of the generated data

实验
生成的数据有两种使用方法:
(1)直接augmentation到训练数据中
(2)作为独立的training set
结果在within-corpus and cross-corpus均表现很好

Introduction就介绍了全文的目的。生成目标类别的数据,使得总体数据的比例是可控制的。同时在总量上也扩充,得到一个a large and balanced synthetic dataset.
第二,三段介绍了GAN在speech方面的应用。

贡献
(1)合成的是feature vectors
(2)基于cycle GAN既保证了(1)的相似性又保证了可区分性。
(3)基于真实数据和合成数据的NN分类器表现优于传统的只用real data的。

method
有标签的数据库X
N类情感
a source domain S :外部的无标签dataset
Ti : samples of emotion i in the labeled dataset X.
两个mapping functions: G i G_i Gi translate from source到target, F i F_i

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值