在进行文本分类时,使用数据集是csv格式的,运行文本分类代码发现报错ValueError: num_samples should be a positive integer value, but got num_samples=0
网上有大佬说是文件内有多余的空行,但是检查我的数据集发现没有多余的空行,最后发现是csv文件每行的字段间的分隔符有问题(csv文件中每行字段间的分隔符最常见的有逗号或制表符),我运行的代码要求是分隔符是制表符,而我的数据集分隔符是逗号,最后使用python代码将我的数据集分隔符改为制表符,文本分类的代码可以运行,有类似错误的小伙伴可以尝试修改分隔符
附修改分隔符的python代码:
import csv
# 打开原文件和目标文件
with open('source.csv', 'r',encoding=UTF-8) as source_file, open('destination.csv', 'w', newline='') as target_file:
reader = csv.reader(source_file)
writer = csv.writer(target_file, delimiter='\t')
# 逐行处理原文件,将每行的字段改为制表符分隔,并写入新文件
for row in reader:
writer.writerow(row)