OpenAI ChatGPT模型训练

打开VSCode

新建一个工作目录

392a93f3ffa1adf7192db471288210ed.png

使用pip install --upgrade openai

配置环境变量:

OPENAI_API_KEY=<你的open ai key>

windows配置:(需要重启)

setx OPENAI_API_KEY "你的open ai key"

准备训练数据集文件:

格式如下:

放到工作目录下比如A.jsonl

使用命令格式化数据:

 6a20e9e4e2cdcac871b2d25607b02856.png

openai tools fine_tunes.prepare_data -f <LOCAL_FILE>

如:openai tools fine_tunes.prepare_data -f A.json.nl

然后一路Y即可 生成两个文件train和valid

然后创建训练模型:

bddcbdef0e81adf4164e4b07055d52dd.png

openai api fine_tunes.create -t <TRAIN_FILE_ID_OR_PATH> -m <BASE_MODEL>

如:openai api fine_tunes.create -t ABC_prepared_train.jsonl -m curie

可以自定义模型名称--suffix:

openai api fine_tunes.create -t test.jsonl -m ada --suffix "custom model name"

正在训练...

e211e073bc8e6a27f1ea5e1c76b657f7.png

等待训练完成(10-20分钟左右)训练完成如下:

消耗$0.04

模型名称:curie:ft-personal-2023-02-12-06-15-31

48fd4cfd48a10cc88a433cdcb921e0d3.png

测试一下:

取训练数据集里的一条试试

a08ad41f808311cd095d368dec7a1540.png

测试结果如下:

e624f0531ebd07ea5fc23cc2b9a36bbc.png

测试通过~

  • 1
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值