Colab_解决训练卡在第一个epoch且step不动的问题

一.问题
如果在使用colab时遇到卡在第一个epoch且step一动不动的情况,大概率是因为需要读取的数据集路径在你的谷歌网盘下,这样就需要联网读取数据到你的云端虚拟电脑中,会导致在第一个epoch异常缓慢甚至卡住。二.解决办法
将数据集压缩后上传至谷歌云盘,在训练时使用linux指令将数据集直接解压到云端虚拟硬盘的/content路径下。注意修改代码中的有关路径。三.示例代码

!pip install pyunpack
!pip install patool
from pyunpack import Archive
Archive('/content/drive/MyDrive/asr-seq2seq/data/data_aishell.rar').extractall('/content')

ps:我的数据集压缩包格式为rar,其他类型压缩包解压指令请自行百度

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值