表征学习
文章平均质量分 61
表征学习类相关论文。表征学习包括通用表征学习(自监督预训练等)、表征属性解耦、物体表征拆分,与其他小类可能存在交叉。
Hym_eric
github: https://github.com/HymEric
展开
-
2021_Image-to-image Translation via Hierarchical Style Disentanglement_CVPR
概要 本文是一片针对人脸进行属性编辑的论文,针对从CycleGAN提出后,图像翻译面临的最大的两个问题就是扩展性(同时处理多种篡改)和多样性(生成不同的结果),然而,一直没有一个很好的方法,可以兼顾扩展性和多样性的同时,又能使得这种篡改满足预期。例如,对于人脸属性篡改任务,我们想要给人脸加上刘海,可是却改变了发色或是背景,再例如,我们想要给人脸加上眼睛,结果竟然性别和年龄也改变了。下面是最新模型StarGANv2的结果: 针对以往方法不能单独控制独立的属性的缺点,设计了层级结构模型HiSD,同.原创 2021-06-23 14:16:33 · 1499 阅读 · 0 评论 -
2019_VideoBERT-A Joint Model for Video and Language Representation Learning_ICCV
模型:看上出很简单,就是利用了bert的模型,输入输出不仅仅是文本,将视频和文本相结合一起自监督训练,不仅可以得到单文本或者单视频内部的关系,还可以得到文本和视频的对应关系。 文中强调了学习的是一种high-level的语义,和之前的视频表征学习不同,使用了三个现成的方法,ASR语音转文字(Youtube自带的一个API接口)、vector quantization(VQ)将视频转化为visual words和bert模型。主要贡献就是提出了这么一种自监督训练视频特征的方法。 这里的输入前面的CLS原创 2021-06-23 09:14:34 · 317 阅读 · 0 评论