【python+pytorh自然语言处理】AttributeError: 'Example' object has no attribute 'label'错误提示

在建模训练过程中遇到如下问题,供大家学习,借鉴

1.数据集字符编码问题 ,'utf-8' codec can't decode byte 0xb1 in position 2: invalid start byte 错误处理.

2.AttributeError: 'Example' object has no attribute 'label'错误提示

如下问题

1. 数据集字符编码问题'utf-8' codec can't decode byte 0xb1 in position 2: invalid start byte 错误处理.

2. 建模过程中遇到 AttributeError: 'Example' object has no attribute 'label'错误提示

字符编码问题解决方案:

运行提示错误:字符不能正确读取
在这里插入图片描述
具体方法如下,重新读取数据集,修改数据集编码方式,更改以为utf8:

在这里插入图片描述
具体代码如下

def check_utf8():
    # python3
    path = 'd:/data/train10400.csv'
    up_path = 'd:/data/10400_urf8.csv'
    f = open(path, "r")  #读取数据集
    fw = open(up_path, "wb")  # 二进制格式写入文件
    i = 0
    while True:
        i += 1
        line = f.readline()
        if not line:
            break
        else:
            try:
                fw.write(line.encode(encoding='utf-8'))#编码设置utf-8
            except:
                # print(i)
                print(str(line))

这样再次运行,正确执行,无编码格式报错问题

处理 AttributeError: 'Example' object has no attribute 'label错误问题

错误原因,是因为数据格式问题导致
在这里插入图片描述
如何解决训练模型过程中数据集错误问题

  1. 预处理数据,代码效验
  2. 对数据进行,模型检测

我们通过debug模型,查找出问题数据
在这里插入图片描述
在数据集定位当前数据,明显发现23行与其他数据集格式不相匹配
在这里插入图片描述

**修改23行格式错误数据**

在这里插入图片描述

**重新运行项目,查看结果**

在这里插入图片描述
成功解决报错问题

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值