在人工智能飞速发展的今天,大语言模型的应用越来越广泛。DeepSeek 作为近期爆火的一款大语言模型,受到了众多开发者的青睐。
今天这篇内容,就来聊聊,如何在本地自己的电脑上部署DeepSeek。
1、哪些场景适合将大模型部署在自己电脑上?
先说结论: 虽说将大模型部署在自己的电脑上,有很多好处,但万不得已,并不推荐个人搞本地部署(钱多或企业除外)。对于普通用户来讲,只是日常简单的使用AI,直接使用市面上主流的云AI工具就足够了。
那在哪些情况下,需要或者适合将大模型(如DeepSeek)部署在自己的电脑上呢?
1、追求极致数据隐私与安全性
-
当处理高度敏感的数据,如医疗记录、商业机密或个人隐私信息时,将大模型部署在本地电脑,可确保数据不会传输到外部服务器,从根本上保障数据的安全性和隐私性。例如,医疗研究人员在分析患者的基因数据时,本地部署能避免数据泄露风险。
-
保护敏感数据: 本地部署可以确保所有数据的处理和存储都在本地完成,不会上传到云端,从而有效避免数据在传输和云端存储过程中可能带来的隐私泄露风险。
-
完全掌控数据: 用户可以完全控制数据的使用和存储,确保数据不被未经授权的访问或用于其他目的。
2、个性化定制需求强烈(高度定制、灵活性)
-
对于一些专业领域,如特定行业的知识问答、代码生成等,开发者可以基于本地部署的大模型进行微调,使其更好地满足特定场景需求。例如,软件开发团队可以针对自身的代码规范和业务逻辑,对大模型进行优化,提升代码生成的准确性和实用性。
-
自定义知识库训练: 用户可以根据自己的需求对模型进行自定义知识库训练,进一步提升模型在特定领域的性能。
-
灵活调整模型参数:本地部署允许用户根据业务需求灵活调整模型参数和功能,满足不同场景下的个性化需求。
-
开源灵活性: 开源模型(如DeepSeek)允许用户无限制地进行微调或将其集成到自己的项目中
3、成本与资源优化(适合企业内)
-
成本可控: 长期使用本地部署比持续使用云服务更具成本效益,尤其适合高频调用场景。
-
硬件友好: DeepSeek等大模型对硬件资源要求较低,可在较少GPU或高级CPU集群上运行,资源效率显著。
4、个人兴趣与学习、研究目的
-
学生、研究人员想要深入了解大模型的运行机制、进行算法实验或者开展模型优化研究,本地部署提供了一个可以自由探索和调试的环境。通过在自己电脑上部署模型,能够更直观地观察模型的运行过程,为学术研究提供便利。
-
技术探索: 对于技术爱好者和研究人员来说,本地部署可以提供一个更自由的实验环境,方便进行模型的测试和优化。
-
教育用途: 教育机构可以利用本地部署的大模型进行教学和研究,无需依赖外部服务。
总之,本地部署大模型适合那些对数据隐私、定制化、成本控制有较高要求的用户和企业。
2、准备工作
1、电脑配置:确保你的电脑具备一定的硬件性能,至少拥有 8GB 及以上的运行内存和足够的硬盘空间。如果有英伟达显卡,部署和运行会更加流畅。
2、下载 ollama:你可以在 ollama 的官方网站(https://ollama.ai/
)上找到对应你操作系统(Windows、MacOS 或 Linux)的安装包,下载并安装。
简单来说,如果你的电脑配置满足最低要求(如8GB内存以上),就可以通过工具(如Ollama)轻松实现本地部署DeepSeek
。
3、本地电脑部署DeepSeek大模型具体步骤
1、安装ollama
1、本地部署首先要安装ollama,ollama
是一个用于在本地运行大语言模型的工具,它能让你在自己的电脑上轻松部署和使用各类模型。你可以把它理解为,一个装AI的盒子,把AI装在盒子里,方便管理。
访问ollama
下载地址:https://ollama.com/download
根据自己的电脑类型,选择不同版本。
2、接下来以Windows为例,下载好安装后,双击安装。(傻瓜式安装即可)
安装完成后,ollama会在后台运行,任务栏会出现一个类似羊驼的图标。
2、选择要安装的模型
1、访问https://ollama.com/search
,选择要安装的模型
2、点击选择deepseek-r1
,进入模型参数界面
这里的数字越大,参数越多,性能越强,所需要的配置也就越高,1.5b代表模型具备15亿参数。
例如,若要运行14b参数模型,需要大约11.5G显存。也就是你的电脑显卡最好要达到16G。
若个人学习用途,一般建议安装最小的1.5b版本即可。大多数的个人电脑配置都能跑的起来。具体大家可以根据自己的电脑性能选择。
3、以1.5b
参数为例,选择1.5b参数后,复制红框中的命令ollama run deepseek-r1:1.5b
。
详细地址: https://ollama.com/library/deepseek-r1:1.5b
3、安装模型
1、打开命令行,在命令行中输入:ollama run deepseek-r1:1.5b
2、下载成功后,就可以与模型对话啦。
此时大模型安装在你的电脑上,就算断网也可以继续用,再也不用担心数据泄露了。
4、使用模型
安装好模型后,此时我们可以通过命令行的方式,在命令行中发送消息来与DeepSeek 大模型对话。
1、例如我的第一个问题是:“世界上是先有鸡还是先有蛋?”
对于这个问题,回答的还可以,果然是推理型模型,思考的过程也给我们列出来了。
2、我的第二个问题是:”你是如何看待DeepSeek爆火的原因“?
这个问题,回答的就太过于敷衍了,直接将DeepSeek的公司背书给出来了,当然也可以理解,毕竟DeepSeek的投喂数据都是几个月前的,那时,它还并没有爆火出圈,而且我们下载的还是最小阉割版模型。
3、这里还有一个问题,当你关闭电脑后,下次若再想使用本地模型时,只需要启动了ollama
, 同时打开命令行界面,输入ollama run deepseek-r1:1.5b
即可。因为你之前已经下载过,这次无需下载,可以直接和模型聊天。
5、为本地模型搭建UI界面
1、使用命令行方式来和模型对话,对于不会编程的小伙伴来说,太难受了。不过没关系,我们有很多方案可以为你的本地模型搭建UI界面,比如Open-WebUI
、Chatbox AI
等。
2、这里我们以ChatBox AI为例,访问:https://chatboxai.app/zh
选择对应的版本,下载安装。
3、选择使用自己的 API Key 或者本地模型:
4、选择本地跑的 deepseek-r1:1.5b
模型:
Ollama 默认使用 端口11434 提供本地服务。当你在本地运行 Ollama 时,可以通过以下地址访问其 API 服务:http://localhost:11434
如果你需要更改默认端口,可以通过设置环境变量 OLLAMA_HOST
来指定新的端口。
5、在ChatBox对话框中,输入:”先有鸡还是先有蛋“,即可调用本地模型,生成答案
至此,简单几步,在你的本地电脑上就安装运行起来了 DeepSeek R1
。
最后的最后
感谢你们的阅读和喜欢,作为一位在一线互联网行业奋斗多年的老兵,我深知在这个瞬息万变的技术领域中,持续学习和进步的重要性。
为了帮助更多热爱技术、渴望成长的朋友,我特别整理了一份涵盖大模型领域的宝贵资料集。
这些资料不仅是我多年积累的心血结晶,也是我在行业一线实战经验的总结。
这些学习资料不仅深入浅出,而且非常实用,让大家系统而高效地掌握AI大模型的各个知识点。如果你愿意花时间沉下心来学习,相信它们一定能为你提供实质性的帮助。
这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】

DeepSeek全套安装部署资料
大模型知识脑图
为了成为更好的 AI大模型 开发者,这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
经典书籍阅读
阅读AI大模型经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验。对于想要深入学习AI大模型开发的读者来说,阅读经典书籍是非常有必要的。
实战案例
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
面试资料
我们学习AI大模型必然是想找到高薪的工作,下面这些面试题都是总结当前最新、最热、最高频的面试题,并且每道题都有详细的答案,面试前刷完这套面试题资料,小小offer,不在话下
640套AI大模型报告合集
这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。
这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
