ollama极简三步运行谷歌Gemma-7B


在当今的科技时代,AI 已经成为许多领域的关键技术。AI 的应用范围广泛,从自动驾驶汽车到语音助手,再到智能家居系统,都有着 AI 的身影,而随着Facebook 开源 LLama2 更让越来越多的人接触到了开源大模型。如今,Google 又推出了新一代开放模型 Gemma,旨在帮助开发者和研究人员更负责任、高效地开发 AI 技术。

ollama是一条命令快速在本地运行大模型,在GitHub超过39K Star的开源项目。
地址:https://github.com/ollama/ollama

笔者亲测有效Windows笔记本快速运行Gemma:配置是Win11,12G内存。-----注意:至少有 8 GB 可用 RAM (运存)来运行 7B 型号,16 GB 来运行 13B 型号,32 GB 来运行 33B 型号。
在这里插入图片描述

一、下载安装 ollama:
https://ollama.com/ 首页点击下载:Ollama Windows(preview),运行 OllamaSetup.exe 一键安装,install就好。请添加图片描述
二、拉取 gemma:7b
打开Windows CMD / PowerShell, 运行如下命令

ollama pull gemma:7b

其实也可以直接运行第三部分的run,里面包括了拉取模型。
在这里插入图片描述
三、运行 Run gemma:7b

ollama run gemma:7b

在这里插入图片描述
输入

please comment on the value of paper "attention is all you need " to ChatGPT

输入

please help to translate your previous answer into Chinese

在这里插入图片描述
长对话效果一般,但是胜在笔记本轻轻松松跑起来,期待未来更多的模型吧!

四、删除gemma:7b
如果不想用也可以直接删除,命令:

ollama rm gemma:7b

在这里插入图片描述

部分参考文章:https://mp.weixin.qq.com/s/XmzDpRKXanCnA8gBcivW8Q

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_45965387/article/details/136268382

  • 12
    点赞
  • 33
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值