极智AI | 多模态大模型中的动态高分辨率

欢迎关注我的公众号 [极智视界]，获取我的更多技术分享

传送： 极智AI | 多模态大模型中的动态高分辨率

大家好，我是极智视界，本文分享一下 多模态大模型中的动态高分辨率。

动态分辨率技术允许模型根据输入图像的复杂度和处理需求，实时调整其处理的分辨率。在处理简单或者信息量较少的图像时，模型可能会采用较低的分辨率以减少计算量；在处理复杂或者细节丰富的图像时，模型则会采用更高的分辨率以捕获更多细节。

下面是 LLava-Next 中动态高分辨率的实现示意图，其实就是两个分支，一个是 split 切图，一个是 re