新手小白如何搭建一个像openai一样的本地大模型(步骤多版本)

有需要的可以点赞收藏哈,话不多说,让我们开始实操一遍。

Ollama安装大模型

1.安装ollama(本教程以win10系统为例)

(1)下载地址:https://ollama.com/

打开后进入以下下载地址下载windows版本ollama,其它系统选择对应版本如下图:

图片

下载后直接运行安装即可,安装好后右下角会显示一个羊驼的小图标(注意:ollama一般默认自动安装在C盘,后期如果下多个大模型,有的同学可能会面临空间不够,这里可以使用我找到的这个方法,如果不需要更改的可以略过此步骤)

(2)更改大模型存放地址:新建一个模型地址环境变量,首先在你要放模型的地址新建一个文件夹,我这里起了个名字ollama-models,可以随便起,接着找见此电脑或者我的电脑右击属性打开后选择高级系统设置如下图:

图片

接着打开后选择环境变量

图片

图片

接着新建输入变量名称OLLAMA_MODELS,变量值就是之前新建文件夹的地址,最后确认,就可以安装大模型到其它盘新建文件夹了。

图片

(3)安装大模型:接下来就可以愉快的选择大模型安装了,在ollama官网找到右上角的Models点进去就有许多大模型供我们选择了,这里我们选一个最近比较热门的大模型llama3来下载

图片

点左上角可以选择版本,要结合自已电脑性能和用途选择,这里选8b,右上角复制

图片

ollama run llama3:8b

然后打开cmd,粘贴后运行就可以下载了,得等一会时间,等待安装完后我们在开启下一步,给它装个像openai -gpt一样的可视界面可以上传图片语音进行对话,就是open-webui,如下图:

图片

2.安装open-webui

项目介绍页:https://github.com/open-webui/open-webui

安装这个界面需要安装docker

(1)安装docker 下载地址:

https://www.docker.com/products/docker-desktop/

进去点击下载windows版本,其它选择其它版本,这里安装需要以下条件,里面有详细说明,

图片

安装说明:https://docs.docker.com/desktop/install/windows-install/

图片

首先我们要确认是否启用虚拟化,在任务管理器界面打开性能查看,如下图,未打开可以参考说明进行打开

图片

接着我们在系统设置里搜索控制面板,打开启用或关闭Windows功能

图片

然后选择Hyper-V、适用于 Linux 的 Windows 子系统打开如下图,

图片

图片

接着重启后我们开始安装docker,有时候会遇到wsl启动失败,可以参考说明进行设置wsl版本,进入docker后我们先改一个镜像地址,这样会提升下载速度如下图:

图片

代码:

在这里插入图片描述

(2)接下来我们就可以安装open-webui界面了

图片在项目介绍界面有一串代码复制下来:

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

把这串代码接着打开cmd粘贴回车运行,就会开始下载,等待下载完成。

图片

接着我们在docker中可以看到open-webui了,如果没有启动点击小三角启动后点击如上图地址就会在浏览器看到界面了

图片

进去后会有个登录界面用自己邮箱和密码注册以下就可以打开了如上图。

图片

进去后界面是英文,然后我们开始设置中文,点击右上角设置小图标,打开后修改如下图:
在这里插入图片描述

接着我们就可以愉快的使用大模型进行对话了,上方选择我们之前下载的大模型开始对话如下图:

在这里插入图片描述

还有可以在左侧模型文件找到社区里喜欢的智能体模型进行下载,需要注册账号,都会下载到我们之前的新建模型位置,接下来就可以自行探索了。

如何学习大模型

现在社会上大模型越来越普及了,已经有很多人都想往这里面扎,但是却找不到适合的方法去学习。

作为一名资深码农,初入大模型时也吃了很多亏,踩了无数坑。现在我想把我的经验和知识分享给你们,帮助你们学习AI大模型,能够解决你们学习中的困难。

我已将重要的AI大模型资料包括市面上AI大模型各大白皮书、AGI大模型系统学习路线、AI大模型视频教程、实战学习,等录播视频免费分享出来,需要的小伙伴可以扫取。

一、AGI大模型系统学习路线

很多人学习大模型的时候没有方向,东学一点西学一点,像只无头苍蝇乱撞,我下面分享的这个学习路线希望能够帮助到你们学习AI大模型。

在这里插入图片描述

二、AI大模型视频教程

在这里插入图片描述

三、AI大模型各大学习书籍

在这里插入图片描述

四、AI大模型各大场景实战案例

在这里插入图片描述

五、结束语

学习AI大模型是当前科技发展的趋势,它不仅能够为我们提供更多的机会和挑战,还能够让我们更好地理解和应用人工智能技术。通过学习AI大模型,我们可以深入了解深度学习、神经网络等核心概念,并将其应用于自然语言处理、计算机视觉、语音识别等领域。同时,掌握AI大模型还能够为我们的职业发展增添竞争力,成为未来技术领域的领导者。

再者,学习AI大模型也能为我们自己创造更多的价值,提供更多的岗位以及副业创收,让自己的生活更上一层楼。

因此,学习AI大模型是一项有前景且值得投入的时间和精力的重要选择。

  • 23
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值