AI绘画模型之：CLIP 与 DALL-E 2

重磅推荐专栏：
《大模型AIGC》
《课程大纲》
《知识星球》

本专栏致力于探索和讨论当今最前沿的技术趋势和应用领域，包括但不限于ChatGPT和Stable Diffusion等。我们将深入研究大型模型的开发和应用，以及与之相关的人工智能生成内容（AIGC）技术。通过深入的技术解析和实践经验分享，旨在帮助读者更好地理解和应用这些领域的最新进展

1. CLIP

1.1 背景

https://openai.com/research/clip
在学习CLIP（Contrastive Language-Image Pre-training）之前，我们需要先理解"模态"的概念。在深度学习领域，"模态"用来描述输入数据的不同形式，比如图像、文本、音频等。不同的模态提供不同的特征，让模型可以从多个角度理解和处理数据。通过整合多种模态的信息，通常可以帮助模型获得更好的性能。