deepseek+dify零成本部署本地知识库保姆级教程

一、本地部署模型

ollama官网:Ollama

下载ollama

ollama基本命令:

#查看版本号
ollama -v

#列出本地所有可用的模型‌
ollama list

#删除一个已安装的模型‌
ollama rm [模型名称]

安装后查看版本号

安装成功!

搜索  deepseek-r1 

具体参数可参照配置表自行选择

出现success安装成功!

dify官网:Dify.AI · 生成式 AI 应用创新引擎

部署dify首先下载dokcer docker官网:https://www.docker.com/

文档链接:Deploy with Docker Compose | Dify

将 Dify 源代码克隆到本地机器:

git clone https://github.com/langgenius/dify.git
启动 Dify

  1. 导航到 Dify 源代码中的 Docker 目录

cd dify/docker

  2. 复制环境配置文件

cp .env.example .env

  3.启动 Docker 容器

      如果您有 Docker Compose V2,请使用以下命令:

docker compose up -d

     如果您有 Docker Compose V1,请使用以下命令:

docker-compose up -d

如果遇到报错:

Error response from daemon: Get "https://registry-1.docker.io/v2/": net/http: request canceled while waiting for connection (Client.Timeout exceeded while awaiting headers)

问题是镜像源没有配置国内的镜像源

Linux系统设置如下:

vi /etc/docker/daemon.json

配如下地址:

{
"registry-mirrors": [
"https://2a6bf1988cb6428c877f723ec7530dbc.mirror.swr.myhuaweicloud.com",
"https://docker.m.daocloud.io",
"https://hub-mirror.c.163.com",
"https://mirror.baidubce.com",
"https://your_preferred_mirror",
"https://dockerhub.icu",
"https://docker.registry.cyou",
"https://docker-cf.registry.cyou",
"https://dockercf.jsdelivr.fyi",
"https://docker.jsdelivr.fyi",
"https://dockertest.jsdelivr.fyi",
"https://mirror.aliyuncs.com",
"https://dockerproxy.com",
"https://mirror.baidubce.com",
"https://docker.m.daocloud.io",
"https://docker.nju.edu.cn",
"https://docker.mirrors.sjtug.sjtu.edu.cn",
"https://docker.mirrors.ustc.edu.cn",
"https://mirror.iscas.ac.cn",
"https://docker.rainbond.cc"
]
}

重新加载配置文件及docker服务:

systemctl daemon-reload

重启docker服务: 

systemctl restart docker

windows系统设置如下:

配置文件:

{
"registry-mirrors": [
"https://2a6bf1988cb6428c877f723ec7530dbc.mirror.swr.myhuaweicloud.com",
"https://docker.m.daocloud.io",
"https://hub-mirror.c.163.com",
"https://mirror.baidubce.com",
"https://your_preferred_mirror",
"https://dockerhub.icu",
"https://docker.registry.cyou",
"https://docker-cf.registry.cyou",
"https://dockercf.jsdelivr.fyi",
"https://docker.jsdelivr.fyi",
"https://dockertest.jsdelivr.fyi",
"https://mirror.aliyuncs.com",
"https://dockerproxy.com",
"https://mirror.baidubce.com",
"https://docker.m.daocloud.io",
"https://docker.nju.edu.cn",
"https://docker.mirrors.sjtug.sjtu.edu.cn",
"https://docker.mirrors.ustc.edu.cn",
"https://mirror.iscas.ac.cn",
"https://docker.rainbond.cc"
]
}

然后重启docker服务

再次执行:

docker compose up -d

dify 安装完成!会有docker名字的这个容器

访问 http://localhost/install 设置账号密码 设置好后

找到模型供应商,添加模型

模型名称自定义可以填写对应的名称 deepseek-r1:7b 

url地址填写:

http://host.docker.internal:11434

保存

选择保存

创建应用

这里就可以访问了,创建本地的知识库,需要用到Embedding 模型,测试bge-m3性能最高

安装bge-m3

ollama pull bge-m3

添加模型

名字可以已定义,url还是设置

http://host.docker.internal:11434

设置成功,现在可以创建知识库

选择上传的知识文件

上传下一步

选择高质量,只用引擎,向量搜索

点击保存处理

嵌入中

嵌入已完成

添加知识库

选择添加

读取的知识库,我的电脑配置没那么高,用7b的响应了1分钟,配置高的可以选择高版本的

### 如何在本地部署DeepSeek Dify #### 准备工作 为了顺利部署DeepSeek Dify,在开始之前需确认已准备好必要的软件环境和支持工具。确保计算机上已经安装了Docker以及相关依赖项,因为DeepSeek Dify部署过程高度依赖于容器化技术来简化配置流程。 #### 获取镜像文件 从官方渠道获取最新的DeepSeek Dify Docker镜像至关重要。这一步骤通常涉及登录到指定的服务平台,并按照指引拉取所需的镜像资源[^1]。 ```bash docker pull deepseek/dify:latest ``` #### 配置环境变量 创建一个`.env`文件用于存储应用程序所需的各种参数设定,比如端口映射、内存分配等重要选项。对于希望使服务对外部网络开放的情况,则应参照特定指导调整相应的主机地址设置[^4]。 ```plaintext # .env file example OLLAMA_HOST=0.0.0.0 PORT=8080 MEMORY_LIMIT=4g ``` #### 启动容器实例 利用先前准备好的镜像与自定义化的.env配置文档启动一个新的Docker容器。此命令会依据给定条件自动完成剩余初始化操作并将应用置于可访问状态。 ```bash docker run -d --name dify \ -p ${PORT}:${PORT} \ -e OLLAMA_HOST=${OLLAMA_HOST} \ -v /path/to/local/data:/app/data \ deepseek/dify:latest ``` #### 测试连接情况 最后一步是对新建立的服务进行简单的功能性测试,以验证一切正常运作。打开浏览器输入http://localhost:${PORT}/api/healthcheck路径查看返回的状态码是否表明API健康良好。 ---
评论 10
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值