Edward的博客

由于训练有素的初级保健医生（PCP）短缺，尤其是在资源匮乏的环境中，初级糖尿病护理和糖尿病视网膜病变（DR）筛查仍然是主要的公共卫生挑战。在此，为了弥合这一差距，我们开发了一个集成图像和语言的系统（DeepDR-LLM），结合了大型语言模型（LLM模块）和基于图像的深度学习（DeepDR-Transformer），为PCP提供个性化的糖尿病管理建议。在回顾性评估中，LLM模块在英语测试中表现出与PCP和内分泌科住院医师相当的表现，并且在中文测试中表现优于PCP，且与内分泌科住院医师表现相当。

传统的生物医学人工智能（AI）模型通常是为特定任务或模态设计的，因此在实际部署中往往表现出**有限的灵活性**，并**难以利用整体信息**。通用AI具有解决这些局限性的潜力，因为它在解释不同的数据类型和为多样化需求生成定制输出方面具有很强的通用性。然而，现有的生物医学通用AI解决方案通常比较笨重，并且对研究人员、从业者和患者来说是**闭源**的。在此，我们介绍了BiomedGPT，这是第一个开源且轻量级的视觉-语言基础模型，设计为能够执行各种生物医学任务的通用模型。BiomedGPT在25个实验中的16个实