Yolov4训练时出现nan值
前一天晚上以为是batchsize设置的太大导致的不稳定,然后调小之后挂了一晚上,第二天早上一看又出现nan,排查了一下代码,发现是txt文件中存在中文导致的,将中文去掉之后恢复正常,再有应该是batchsize越大越稳定,之前的假设不成立。
随着实验的进行发现,将txt文件修改之后还是会出现nan的情况,分析可能是因为初始权值不稳定,因为之前已经在小数据集上训练过此权值了,所以直接解冻训练,恢复正常。
前一天晚上以为是batchsize设置的太大导致的不稳定,然后调小之后挂了一晚上,第二天早上一看又出现nan,排查了一下代码,发现是txt文件中存在中文导致的,将中文去掉之后恢复正常,再有应该是batchsize越大越稳定,之前的假设不成立。
随着实验的进行发现,将txt文件修改之后还是会出现nan的情况,分析可能是因为初始权值不稳定,因为之前已经在小数据集上训练过此权值了,所以直接解冻训练,恢复正常。