- Generator model: output distribution
- generator,它是个neural network,Discriminator,也是个neural network,他们的架构长什麼样子,你完全可以自己设计,你可以用CNN 你可以用,transformer 都可以,只要你能够產生出你要的输入输出,就可以了。
- 最小化true data和generator data之间的散度
- 如何去找一个 G,去 Minimize 这个 Divergence ,这个就是 GAN 所遇到的问题。GAN 这一整个系列的 Work,就是要告诉你说,怎麼在只有做 Sample 的前提之下,我根本不知道 PG 跟 Pdata,实际上完整的 Formulation 长什麼样子,居然就估测出了 Divergence。