006-WSL-Ubuntu中Ollama轻松下载并运行本地大模型-【AI超车B计划】

一、目标

  • 了解什么是Ollama,为什么要用Ollama;

  • 学会如何使用Ollama下载并运行;

  • 下载大模型,如LLama3、Qwen,并运行;

二、路径

  1. 学习笔记中关于Ollama的简介,了解什么是Ollama,为什么使用Ollama;

  2. 在Ubuntu中安装ollama并运行;

  3. 通过ollama下载LLaMA3、Gemma、Qwen大模型并运行;

三、笔记

1、安装Ollama

①什么是Ollama?

Ollama是一个开源的大型语言模型服务工具,它帮助用户快速在本地运行大模型,通过简单的安装指令,可以让用户执行一条命令就在本地运行开源大型语言模型,例如 Llama2。这个框架简化了在Docker容器内部署和管理LLM的过程,使得用户能够快速地在本地运行大型语言模型。

②Ollama官网:Ollama

点击 Download 然后,点击 Linux,复制命令,粘贴进去Terminal:

curl -fsSL https://ollama.com/install.sh | sh
③下载过程:
④下载完成,已自动安装好:
⑤验证ollama安装成功:

在Terminal中输入 ollama,如果出现如图输出即说明ollama已安装成功

ollama

图中输出即是ollama常用命令:

2、下载、运行大模型在本地(以Qwen为例)

①搜索大模型名称

在搜索框中,搜索 Qwen,并点击图中红框内容

进入如图界面:

②根据需要选择参数:qwen:7b-chat

③选择7B-Chat并复制指令,粘贴进Terminal,回车:
ollama run qwen:7b-chat

开始下载,等待下载完成:

④下载完成后,可以直接与大模型进行对话:
⑤对话验证:

⑥退出对话模式:

退出请按 ctrl + d

3、查看Ollama服务地址

Terminal中输入

ollama serve

出现图中输出,即说明ollama已经在运行中,且运行端口是 11434。

4、查看Ollama已下载好的模型

Terminal中输入

ollama list

注意:NAME字段是模型的名称;


什么是AI超车计划?

是“产品江湖”社区发起的AI学习计划,由沐逸@产品江湖(微信号:legend_pmdiss)老师主理,旨在帮助大家在AI时代找到自己的位置和价值。

计划包含:
A计划【不掉队】-- 快速了解各种AI应用的使用,如Kimi、各种GPT,让自己不掉队!
B计划【赶得上】-- 快速了解现有开源的AI开发工具,如dify、Coze,以了解如何迅速构建AI应用,让自己赶得上!
C计划【快超车】--通过低代码平台并借助AI辅助编程,从零到一打造大模型应用,让自己实现快速超车!

了解AI超车计划

  • 26
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在WSL Ubuntu上进行下载,有几种方法可以实现。一种方法是使用wget命令来下载远程URL。例如,您可以使用以下命令下载一个文件: sudo wget [URL] 在这个命令,将[URL]替换为您要下载的文件的URL地址。请确保您具有适当的权限来执行此操作。 另一种方法是在Windows系统上下载文件,然后将文件上传到WSL Ubuntu。您可以将文件上传到WSL Ubuntu的home目录或任何其他您喜欢的目录。一种简单的方法是通过将文件拖放到WSL Ubuntu的窗口来执行此操作。 根据您提供的引用内容,您可以通过在PowerShell执行以下命令来下载wsl-ubuntu-1604.appx文件,然后将其上传到WSL Ubuntu: sudo wget https://media.pragprog.com/titles/vsjavas/code/tdjsa.zip 请注意,您需要在执行此命令之前安装wget工具。如果您尚未安装wget,请先运行以下命令进行安装: sudo apt-get update sudo apt-get install wget 以上是一些常见的方法,您可以根据自己的需求选择适合您的方法来下载wsl-ubuntu。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [wsl ubuntu如何从指定的网址url下载文件?](https://blog.csdn.net/shizheng_Li/article/details/123022306)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [wsl-ubuntu-1604.appx.zip](https://download.csdn.net/download/u011463794/12378037)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值