XTuner
XTuner 框架可以提供 LLM 微调需要使用到的各种工具,使用户专注于微调本身,包括数据和模型配置,而非繁琐的数据处理和功能构建。
LoRA 和 QLoRA
为大模型附加一个 Adapter,作为模型的附件(也可与模型 merge 后生成新的模型),给模型赋予更新的能力
XTuner 框架可以提供 LLM 微调需要使用到的各种工具,使用户专注于微调本身,包括数据和模型配置,而非繁琐的数据处理和功能构建。
为大模型附加一个 Adapter,作为模型的附件(也可与模型 merge 后生成新的模型),给模型赋予更新的能力