一、视频介绍(30分钟)
书生·浦语大模型全链路开源开放体系_哔哩哔哩_bilibili
二、GITHUB
简单介绍:
InternLM是一个主要由上海AI实验室开发的组织,致力于开源高质量的语言模型(LLM)以及一整套用于开发和应用的工具链。以下是其核心部分的总结:
### 模型
- **InternLM**: 多语言基础模型和聊天模型系列。
- **InternLM-Math**: 领先的双语数学推理LLM。
- **InternLM-XComposer**: 基于InternLM的视觉语言大模型(VLLM),适用于高级文本图像理解和创作。
### 工具链
- **InternEvo**: 大规模模型预训练和微调的轻量级框架。
- **XTuner**: 高效微调LLM的工具包,支持多种模型和算法。
- **LMDeploy**: 压缩、部署和服务LLM的工具包。
- **Lagent**: 构建基于LLM代理的轻量级框架。
- **AgentLego**: 扩展和增强基于LLM代理的多功能API库。
- **OpenCompass**: 大模型评估平台,提供公正、开放和可复现的基准。
- **OpenAOE**: 用于比较多个模型的优雅且即插即用的聊天界面。
### 应用
- **HuixiangDou**: 基于LLM的专业助手,处理群聊中的复杂技术问题。
- **MindSearch**: 基于LLM的多代理网络搜索引擎框架。
### 开源项目亮点
- **InternLM2.5**: 支持1M上下文的官方发布基础和聊天模型。
- **LMDeploy**: 压缩、部署和提供LLM服务的工具包。
- **InternLM-XComposer-2.5**: 支持长上下文输入输出的多功能视觉语言模型。
- **XTuner**: 高效微调LLM的工具包,兼容多种模型。
- **MindSearch**: 类似Perplexity.ai Pro和SearchGPT的基于LLM的多代理搜索引擎框架。
### 其他信息
- 组织成员未公开,必须是成员才能查看。
- 主要使用的编程语言为Python,也有使用TypeScript、CSS、HTML和Jupyter Notebook。
- GitHub页面遵循2024年GitHub的条款、隐私政策、安全策略等标准协议。
该组织在LLM领域提供了全面的资源,从模型到工具链再到具体应用,涵盖了研究、开发和实际部署的各个环节。