个人部署DEEPSEEK

个人部署本地DEEPSEEK

一、安装Ollama

Ollama是一个开源工具,用于在本地轻松运行和部署大型语言模型。以下是安装Ollama的步骤:

访问Ollama官网:前往Ollama官网,点击“Download”按钮。
下载安装包:根据你的操作系统选择对应的安装包。下载完成后,直接双击安装文件并按照提示完成安装。

ollama --version

如果输出版本号(例如ollama version is 0.5.6),则说明安装成功。

二、下载并部署DeepSeek模型

Ollama支持多种DeepSeek模型版本,用户可以根据硬件配置选择合适的模型。以下是部署步骤:

选择模型版本:
入门级:1.5B版本,适合初步测试。
中端:7B或8B版本,适合大多数消费级GPU。
高性能:14B、32B或70B版本,适合高端GPU。
下载模型:
打开终端==命令提示符==,输入以下命令下载并运行DeepSeek模型。例如,下载7B版本的命令为:

ollama run deepseek-r1:7b

三、安装时报错

安装时出现timeout的报错,详见下图。怀疑是连接公司网络的问题,等验证后再来写。

Error: pull model manifest: Get "https://registry.ollama.ai/v2/library/deepseek-r1/manifests/7b": dial tcp 104.21.75.227:443: i/o timeout

四、解决办法

首先怀疑是网络问题,断掉公司的局域网,连上手机热点后,再重新执行命令发现是能够成功运行的。
电脑连接热点后,命令能够执行了

五、总结

首先需要排除网络问题,更换局域网即可。

### 解决方案 当遇到 `pull model manifest` 错误时,这通常意味着客户端无法成功获取远程服务器上的模型清单文件。具体表现为连接超时或被远端主机强制关闭的情况[^1]。 对于此类问题,建议采取以下措施: #### 1. 检查网络配置 确认本地机器到目标服务器之间的网络路径畅通无阻。可以尝试通过命令行工具如 `ping` 或者 `traceroute` 来测试与目标地址(例如:34.120.132.20)的连通性。如果发现延迟过高或是包丢失,则可能是由于ISP路由设置或其他外部因素引起的通信障碍。 #### 2. 验证URL合法性 仔细核对请求中的 URL 是否正确无误。某些特殊字符编码不当可能会导致解析失败,进而引发资源未找到的问题。比如,在第二个案例中提到的错误信息里包含了不正常的转义序列 `%!A(MISSING)` 和 `%!F(MISSING)` ,这些显然不是标准格式的一部分[^2]。 #### 3. 更新认证凭证 考虑到第三个例子提到了HTTP状态码401 (Unauthorized),说明可能存在权限不足的情形。应当确保使用的 API key 或其他形式的身份验证令牌是最新的,并且具有足够的访问级别来执行所需操作[^3]。 #### 4. 尝试更换镜像源 有时官方提供的下载链接可能暂时不可用或者是地区性的服务中断所致。此时不妨考虑寻找可信赖的第三方镜像站点作为替代选项继续尝试拉取所需的模型数据。 ```bash export OLLAMA_REGISTRY_URL="http://alternative-mirror-url" ollama pull your-model-name ``` 以上方法可以帮助排查并最终解决问题所在。值得注意的是,上述每一步骤都应独立实施并观察效果;一旦某个环节恢复正常即停止后续动作以免引入不必要的变量干扰诊断过程。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值