问题描述:
模型平台采用ollama进行模型管理,利用ollama下载deepseek模型,并运行。运行后终端可以运行但是没有推理输出。
解决方法:
1.检查ollama软件版本,deepseek需要最新ollama软件。
2.选择合适自己显卡大小的模型。
问题描述:
模型平台采用ollama进行模型管理,利用ollama下载deepseek模型,并运行。运行后终端可以运行但是没有推理输出。
解决方法:
1.检查ollama软件版本,deepseek需要最新ollama软件。
2.选择合适自己显卡大小的模型。