Bolt.New 发布了一段时间,虽然目前在 Github 上开源,但是本地部署是需要使用 Anthropic API key,这个在国内有点不太好搞。后面也想过看看能不能调整使用自己的LLM,但是感觉改源码又有点麻烦,于是就放弃了。
官方仓库运行后的界面中,是不支持自定义LLM模型,默认使用的是 Anthropic API key。
接下来给大家介绍一个可以支持接入其他大模型的开源项目。
# 代码仓库
https://github.com/coleam00/bolt.new-any-llm.git
例如本地安装了 Ollama ,并配置到项目的环境,就能够使用里面下载好的模型,例如 qwen2.5-coder 编码模型。
需要注意的是,所选的模型不能少于 7b 参数,否则可能会无法处理大型 Bolt.new 提示符,就不会自动生成代码和预览功能。
而且笔者在测试 qwen2.5-coder:7b 模型的时候,也会偶尔出现幻觉,不会自动生成代码。
公众号回复【bolt01】查看详细安装教程