ollama 导入GGUF模型文件

GGUF模型导入

1 编写Modelfile文件

1：创建一个文本文件，建议改名为模型名，扩展名为Modelfile。 比如你下载的模型文件名是llama-8b.gguf，那这个文件名就叫llama-8b.modelfile
2：用记事本编辑文件添加模型文件地址：FROM ./llama-8b.gguf
3： 在命令行中执行指令转换模型 ollama create llama-8b -f llama-8b.modelfile

完成转换的模型会提示success

5. 测试一下。命令行输入ollama run llama-8b "hi who are u?"看有没有回复

这啥模型。回复的都是些啥啊。。

打开ui交互界面，看看模型选择，也有了