[AI]windows部署Ollama

1、下载&&安装Ollama

下载地址:Download Ollama on Windows

1)下载完成后直接点击exe文件进行安装即可,安装程序不能选择安装目录

2)完成后执行cmd命令,输入ollama命令,如下即表示成功

2、配置模型安装目录

ollama模型默认安装地址在C:\Users\<用户名>\.ollama

因为模型较大,所以我们需要在环境变量内设置模型的安装位置,如下进行设置

变量名:OLLAMA_MODELS

变量值:模型安装位置,如D:\Ollama

注意:重启电脑

注意:重启电脑

注意:重启电脑

3、下载模型测试

上面完成了ollama安装及模型的地址配置,可在ollama官网搜索支持的模型

如我本地GPU是1060 6G,我选择qwen:4b进行测试,在官网搜索qwen进入详情页如下

copy右侧命令在命令行执行,得到如下界面

会自动检测本地是否存在并下载没有的模型,下载完成后为自动运行

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值