写一段python代码,可以将.csv的数据集分成训练集,测试集,开发集,比例大小为8:1:1

写一段python代码,可以将.csv的数据集分成训练集,测试集,开发集,比例大小为8:1:1

下面展示一些 内联代码片

// 一段python代码,可以将.csv的数据集分成训练集,测试集,开发集,比例大小为8:1:1
import pandas as pd
from sklearn.model_selection import train_test_split

#载入数据
data=pd.read_csv('data.csv')

#将数据集分为训练集,测试集和开发集(比例大小为8:1:1)
train_data,dev_test_data=train_test_split(data,test_size=0.2,random_state=42) 
dev_data,test_data=train_test_split(dev_test_data,test_size=0.5,random_state=42)

#保存训练集,测试集和开发集
train_data.to_csv('train.csv',index=False)
test_data.to_csv('test.csv',index=False)
dev_data.to_csv('dev.csv',index=False)

这段代码首先使用pandas库中的read_csv()函数来读取csv文件并存储在一个DataFrame对象中。然后调用sklearn.model_selection库中的train_test_split()函数来将数据集划分为80%的训练集和20%的开发测试集。接下来,再次使用train_test_split()函数将开发测试集分为50%的开发集和50%的测试集。最后,将三个数据集(即train.csv, test.csv和dev.csv)分别保存到本地磁盘上。

  • 3
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值