自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 收藏
  • 关注

原创 Ollama与Shimmy:大模型运行与适配的完美搭档

Ollama与Shimmy的核心区别在于:Ollama是本地大语言模型运行框架,直接提供模型服务;Shimmy是环境兼容层,解决不同API标准间的适配问题。Ollama专注模型部署和管理,提供统一API接口;Shimmy则实现环境接口转换,使智能体能在各类环境中运行。二者可协同工作:Ollama作为"大脑"驱动决策,Shimmy作为"连接器"解决环境兼容性问题。它们定位不同但互补,共同构建完整的大模型应用生态。

2025-09-18 10:06:23 1152

原创 Ollama——运行、管理和部署各种开源大模型

Ollama是一款开源大语言模型本地化工具,支持在个人电脑上运行和管理Llama、DeepSeek等主流模型。它提供类似Docker的简易命令行操作,支持Windows/macOS/Linux系统,所有数据处理均在本地完成,保障隐私安全。用户可通过API或Python代码调用模型,还能自定义Modelfile优化性能。针对不同硬件配置,Ollama提供从1.5B到70B参数的多种模型选择,并支持量化版本以降低资源消耗。该工具显著降低了本地部署大语言模型的门槛,是开发者探索AI的理想选择。

2025-09-18 09:56:35 1537

原创 Shimmy——为模型配一个“翻译官”

Shimmy是一个强化学习API转换工具,它能将DeepMind Control、OpenAI Retro等不同环境的API自动转换为Gymnasium/PettingZoo标准格式。就像万能翻译官解决跨国会议的语言障碍一样,Shimmy让研究人员无需重写算法就能兼容各种环境,只需使用Gymnasium标准代码即可操作不同平台。这大大节省了处理环境兼容性问题的时间,让开发者能专注于算法研究本身。

2025-09-17 16:33:21 641

原创 Shimmy——在本地私密、免费地使用大模型

Shimmy是一款轻量级开源工具(仅5MB),可快速在本地电脑部署AI大模型服务。它能自动识别GGUF格式模型文件,提供与OpenAI完全兼容的API接口,让现有AI应用无需修改即可接入本地模型。特点包括:秒级启动、低资源消耗(<50MB内存)、跨平台支持、模型热切换等。适用于开发者测试、隐私敏感数据处理、学术研究等场景,是替代云端AI服务的轻量化解决方案。使用方式极简:下载单文件→准备模型→运行命令→修改API地址指向本地即可。

2025-09-16 14:26:13 1697

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除