XTuner微调工具作业

参考文件https://github.com/InternLM/Tutorial/blob/camp2/xtuner/personal_assistant_document.md

本节课主要介绍了如何使用XTuner这款微调工具来完成个人小助手的微调过程。首先,我们需要在InternStudio中创建并配置一个开发机,以便为微调任务提供必要的计算资源。在选择开发机时,我们根据任务需求选择了Cuda11.7-conda镜像,并配置了相应的A100 GPU资源。

  接着,我们进入了开发机的终端界面,开始安装XTuner的环境。安装环境是微调任务的第一步,它确保了我们可以顺利运行XTuner工具。在安装过程中,我们选择了合适的Python版本和依赖库,并通过pip命令进行了安装。如果遇到安装速度过慢的问题,我们还可以通过更换国内的镜像源来加速安装过程。在安装好环境好,输入激活指令点击空格确认指令在进行下一步

  完成环境安装后,我们进入了前期准备阶段。在这个阶段,我们明确了微调的目标,并收集了相关的数据集。为了让模型能够按照我们的期望进行回复,我们在数据集中加入了大量与微调目标相关的数据。这些数据将作为模型训练的基础,帮助模型理解并学习我们的意图。

  最后,我们启动了微调过程。在XTuner的配置库中,我们找到了合适的配置文件,并根据自己的需求进行了修改。修改完成后,我们一键启动了训练过程。训练完成后,我们还可以通过简单的指令将训练好的模型进行转换和部署,以便在实际场景中使用。但是训练时间会比较长需要耐心等待

 

在训练完成后小助手便可以对提出的问题展开回答 通过本节课的学习,们掌握了使用XTuner进行个人小助手微调的基本流程。从开发机的准备到环境的安装,再到数据集的准备和微调过程的启动,每一步都至关重要。通过实践操作,我们能够更加深入地理解微调的原理和方法,并为自己的小助手增添更多的个性化和智能化功能。
 
 

                      

  • 7
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值