Llama3.2 震撼发布，教你轻松本地电脑部署Llama3.2，搭建免费本地大模型助手

Meta 公司正式发布了多模态大模型 ——Llama3.2。今天斜杠君手把手教大家如何在本地电脑上部署Llama3.2大模型，个人电脑也可以轻松运行，打造一个属于自己的本地大模型助手。😊

一、安装前预习

Llama 3.2 是什么？

是 Meta（Facebook 的母公司）发布的一系列最先进的开源大语言模型。

此次Meta一共发布了Llama 3.2的4个型号：

110亿和900亿参数的多模态版本。

10亿参数和30亿参数的轻量级纯文本模型。

Ollama 是什么？

Ollama 是一个开源的大模型管理工具，它提供了丰富的功能，包括模型的训练、部署、监控等。通过Ollama，你可以轻松地管理本地的大模型，提高模型的训练速度和部署效率。此外，Ollama还支持多种机器学习框架，如TensorFlow、PyTorch等，使得你可以根据自己的需求选择合适的框架进行模型的训练。

二、开始部署

1、下载安装程序

官网下载地址：https://ollama.com/download

备注：如果不能下载的，关注后回复"ollama"，获取安装包。

因为我的电脑是windows， 所以这里我下载Windows这个版本。

下载好了，程序大小一共是664M。

2、开始安装

下载好后，双击点开始安装：

这里要注意，默认Ollama 下载的模型模型保存在 C 盘，如果想更改默认路径的话，可以通过设置 OLLAMA_MODELS 进行修改。

(1) 右键“我的电脑”，选择“属性”。

(2) 选择“高级系统设置”，然后选择“环境变量”。

(3) 选择“新建”，然后输出变量名和变量值。

这里要注意：变量名是一个固定值，一定要输入：OLLAMA_MODELS

变量值就是你想要安装的目录，我这里设置的是D:\ollama\models

(4) 设置完后可以在cmd中检查一下：echo %ollama_models%

安装完成后，Win+R键调出运行窗口：

3、安装 Llama 3.2 大模型

在官网点击这里导航「Models」，可以看到所有可用大模型：

在窗口中键入cmd调出控制台，在控制台中运行命令：

ollama run llama3.2

这个命令安装的是3B模型。

如果你想安装1B模型，请使用以下命令：

ollama run llama3.2:1b

下载速度很快，最主要国内网就可以下载，10M/S。

稍等一会儿，就安装完成了。

4、测试

先输入一个英文：

再输入一个中文的：

鲁迅为什么暴打周树人？

通过答案，可以看出，小参数模型还是那么能编故事，哈哈~

好了，到这里搭建 「本地电脑部署Llama3.2大模型」 的教程就为大家讲解到这里，大家快动手试试吧 ~

如何学习AI大模型？

作为一名热心肠的互联网老兵，我决定把宝贵的AI知识分享给大家。 至于能学习到多少就看你的学习毅力和能力了 。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

这份完整版的大模型 AI 学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、全套AGI大模型学习路线

AI大模型时代的学习之旅：从基础到前沿，掌握人工智能的核心技能！

二、640套AI大模型报告合集

这套包含640份报告的合集，涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师，还是对AI大模型感兴趣的爱好者，这套报告合集都将为您提供宝贵的信息和启示。

三、AI大模型经典PDF籍

随着人工智能技术的飞速发展，AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型，如GPT-3、BERT、XLNet等，以其强大的语言理解和生成能力，正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

四、AI大模型商业化落地方案

作为普通人，入局大模型时代需要持续学习和实践，不断提高自己的技能和认知水平，同时也需要有责任感和伦理意识，为人工智能的健康发展贡献力量。