TinyLLaVA: A Framework of Small-scale Large Multimodal Models

论文：https://arxiv.org/abs/2402.14289

代码：https://github.com/TinyLLaVA/TinyLLaVA_Factory

轻量级多模态模型的设计思路：包括更换backbone、更换训练策略和使用更多训练数据。

多模态小模型：LLaVa-Phi、TinyLLaVa、MobileVLM系列 三者中， TinyLLaVa 效果最佳。