本地大模型1:安装部署本地Ollama大模型

推荐1:文章来自B站【云城叨叨】的视频的总结,想要获得更全面的内容请前往:【2024年7月最新视频,从无到有,教你本地部署Chat GPT大语言模型】 https://www.bilibili.com/video/BV11ZbBeUEEo/?share_source=copy_web

视频重要点截图

推荐2:Ollama全面指南:安装、使用与高级定制_ollama安装-CSDN博客

目录

一、安装Ollama大模型启动器

1.浏览器打开Ollama,点击Download

2.选择对应系统的版本,点击Download for ...下载

3.下载后双击进入,点击install安装,等待安装完成

4.安装完成后Win+R,输入cmd进入,输入ollama并回车,显示如下页面则ollama安装成功

二、安装大模型

1.修改环境变量,安装大模型到D盘(默认是C盘)。Win+i进入设置,搜索【查看高级系统设置】,进入【环境变量】

2.进入Path,配置Ollama安装位置的环境变量,配置完后点击确定

 3.新建变量名OLLAMA_MODELS(图片错了),设置路径,三连【确定】。注意:一定要重启Ollama!!!否则依然会安装到C盘,步骤在图片后

4.点击进入Models,选择需要的大模型,这里以llama3.1为例,点击进入

5.初学者以8b(8亿训练参数)为例,下拉点击选择8b(选择后复制内容会变化),点击复制

6.在cmd粘贴并回车,等待下载

7.错误:如果出现下面的错误,可以试试粘贴回车重试几遍,或者再重启ollama,还不行试试再搭个梯子,最后依然不行就去搜一下试试别的方法?


一、安装Ollama大模型启动器

1.浏览器打开Ollama,点击Download

2.选择对应系统的版本,点击Download for ...下载

3.下载后双击进入,点击install安装,等待安装完成

  

4.安装完成后Win+R,输入cmd进入,输入ollama并回车,显示如下页面则ollama安装成功

二、安装大模型

1.修改环境变量,安装大模型到D盘(默认是C盘)。Win+i进入设置,搜索【查看高级系统设置】,进入【环境变量】

2.进入Path,配置Ollama安装位置的环境变量,配置完后点击确定

 3.新建变量名OLLAMA_MODELS(图片错了),设置路径,三连【确定】。注意:一定要重启Ollama!!!否则依然会安装到C盘,步骤在图片后

重启:在右下角找到羊驼图标,右键或者单机,在弹出的下拉框选择【Quit Ollama】,然后Win+R打开cmd,输入ollama回车即可。等以后下载了大模型后,直接【ollama run 模型名字】即可打开模型。

 

4.点击进入Models,选择需要的大模型,这里以llama3.1为例,点击进入

5.初学者以8b(8亿训练参数)为例,下拉点击选择8b(选择后复制内容会变化),点击复制

6.在cmd粘贴并回车,等待下载

下载成功并测试对话

7.错误:如果出现下面的错误,可以试试粘贴回车重试几遍,或者再重启ollama,还不行试试再搭个梯子,最后依然不行就去搜一下试试别的方法?

三、用java连接ollama

点击前往推荐文章

四、用python连接ollama

点击前往我的文章

### 如何将 Ollama 安装在 Windows 的 D 盘 为了将 Ollama 安装至 Windows 中的 D 盘,需执行特定操作来改变默认路径并迁移必要的文件夹。 #### 修改安装位置 通常情况下,软件会默认安装于 C 盘下的用户目录内。对于希望更改此设置的情况,可以采取手动调整的方式处理。当首次安装 Ollama 时,并未提供直接指定安装路径的选择;因此,在初次安装完成后,可通过移动应用程序及其关联数据的方法实现目标[^1]。 #### 移动应用文件夹 需要把 `C:\Users\XX\AppData\Local\Programs\Ollama` 文件夹整体迁移到新的位置,比如设定为 `D:\Ollama` 。这一步骤涉及到物理上复制整个文件结构到新磁盘分区,并确保所有权限保持不变以便后续正常使用。 #### 调整环境变量或快捷方式 完成上述转移之后,可能还需要更新系统的环境变量或是创建指向新位置的应用程序启动器(即桌面图标),从而使得每次调用 Ollama 都能正确访问其实际存储的位置。如果存在依赖这些绝对路径的服务注册表项或其他配置,则同样要相应修改它们以反映最新的部署情况[^3]。 #### 处理模型文件 除了主程序外,还需关注那些由 Ollama 使用的大规模预训练模型的数据集,默认位于用户的个人资料下 (`C:\Users\XX\.ollama`) ,这部分也需要同步搬迁到相同的目标驱动器中去,例如转移到 `D:\Ollama.ollama` 下面保存。 通过以上措施,即可成功地让 Ollama 工作在一个不同于初始设定的新硬盘空间里工作了。 ```powershell # PowerShell脚本用于验证路径是否存在以及尝试创建它 $destinationPath = "D:\Ollama" if (-Not (Test-Path $destinationPath)) { New-Item -ItemType Directory -Force -Path $destinationPath } ```
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值