TypeError: default_collate: batch must contain tensors, numpy arrays, numbers, dicts or lists； found

于 2023-09-14 15:59:18 发布
阅读量1.4k 收藏
点赞数
分类专栏： 深度学习报错 文章标签： numpy
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41413211/article/details/132880910
版权

原因：DataLoader中出现了NoneType对象。这通常意味数据集（通常是一个继承自torch.utils.data.Dataset的类）在某个时候返回了None。

解决方案：

（已解决）在多进程加载数据时遇到这个问题：将DataLoader的num_workers参数设为0

data_loader = DataLoader(my_dataset, batch_size=32, shuffle=True, num_workers=0)

坠金
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
亲测解决default_collate: batch must contain tensors, numpy arrays, numbers, found ＜class ‘NoneType‘＞
狂小虎/Anthony Dave的博客 KuangXiaoHu's Blogs
03-13 687
这个问题是由于dataloader读取的数据中有None类型的变量，而default_collate不能处理这种变量。解决方法是检查读取的变量，如果None可以设成0不使用。
Pytorch——报错解决：TypeError: default_collate: batch must contain tensors, numpy arrays, numbers, found
Irving.Gao的博客
10-31 1万+
主要原因是由于获取到batch中输入有None，反推代码，说明你的。因此，解决方法就是不要让返回值有None即可。函数返回值为None，因此出现如下报错。
pytorch训练模型时dataloader报错“default_collate: batch must contain tensors, numpy arrays, numbers, dicts ”
helloworld_Fly的博客
07-18 4668
这个数组里边的dtype都是object,想起来之前在这个数组里边存过str,怪不得现在是object。打印number_info_array,label_info都是ndarray。解决方式手动改类型。
default_collate: batch must contain tensors, numpy arrays, numbers, dicts or lists； found object
先说一下，就简单地写点儿氵文，不是博客，只是我的笔记本/工具书
09-11 9862
Torch跑的时候报了这个： TypeError default_collate: batch must contain tensors, numpy arrays, numbers, dicts or lists; found object 我之前加载数据的操作应该木啥问题好吧： 就是先继承 torch.utils.data.Dataset 类写一个子类 然后 init 一个 torch.utils.data.DataLoader 对象 结果在调用的时候： for x, y in trainloader
pytorch学习笔记---搭建CNN识别MNIST
不加辣椒的博客
05-29 2039
CNN网络搭建 import torch import torch.nn as nn import torch.nn.functional as F import torchvision import torch.utils.data as Data import matplotlib.pyplot as plt # define hyper parameters Batch_size = 100 Epoch = 1 Lr = 0.5 # define train data and test data
default_collate: batch must contain tensors, numpy arrays, numbers, dicts or lists； found ＜class ‘PI
qq_35037684的博客
04-15 5462
报错1： File "/opt/conda/lib/python3.7/site-packages/torch/utils/data/_utils/fetch.py", line 47, in fetch return self.collate_fn(data) File "/opt/conda/lib/python3.7/site-packages/torch/utils/data/_utils/collate.py", line 84, in default_collate ret
Pytorch的Dataloader报错：TypeError: batch must contain tensors, numbers, dicts or lists
热门推荐
GZKPeng的博客
07-17 1万+
具体报错： TypeError: batch must contain tensors, numbers, dicts or lists; found dataloader=torch.utils.data.DataLoader(dataset,batch_size=1,shuffle=True) 表面上看这个代码没有问题，实际上问题出在了dataloader机制的要求上，dataload...
TypeError: _queue_reduction(): incompatible function arguments.
01-20
TypeError: _queue_reduction(): incompatible function arguments. The following argument types are supported: 1. (process_group: torch.distributed.ProcessGroup, grads_batch: List[List[at::Tensor]], ...
pytorch 实现tensor与numpy数组转换
12-23
看代码，tensor转numpy: a = torch.ones(2,2) b = a.numpy() c=np.array(a) #也可以转numpy数组 print(type(a)) print(type(b)) print(a) print(b) 输出为： tensor([[1., 1.], [1., 1.]]) [[1. 1.] [1. 1.]] numpy转tensor： import torch import numpy as np a = np.ones(5) b = torch.
解决Python中报错TypeError: must be str, not bytes问题
09-17
### 解决Python中报错TypeError: must be str, not bytes问题 #### 一、问题背景与常见场景 在Python编程过程中，尤其是处理文件操作时，可能会遇到“TypeError: must be str, not bytes”这一错误。这通常发生在...
TypeError: Unexpected keyword argument passed to optimizer: learning_rate 解决方法
01-21
TypeError: Unexpected keyword argument passed to optimizer: learning_rate 3.问题定位：  先看报错代码：大概意思是， 传给优化器的learning_rate参数错误。 模型训练是在服务器Linux环境下进行的，之后在...
Python BeautifulSoup [解决方法] TypeError: list indices must be integers or slices, not str
01-20
在Python编程中，BeautifulSoup库是一个非常常用的网页解析工具，尤其...通过以上方法，你可以有效地解决`TypeError: list indices must be integers or slices, not str`的错误，并继续进行网页解析和数据提取的工作。
Pytorch TypeError: batch must contain tensors, numbers, dicts or lists
banxia1995的博客
04-12 2047
pytorch 出现Pytorch TypeError: batch must contain tensors, numbers, dicts or lists错误，应该是dataloader的错误。 可以加上如下几句： if self.is_transfrom: img_data=self.is_transfrom(img_data) return img_data,lab 参考博客...
pytorch训练报错TypeError: batch must contain tensors, numbers, dicts or lists found class PIL.Image.I
Hello Word!
06-13 7319
Traceback (most recent call last): File "/home/user1/main.py", line 1153, in <module> main() File "/home/user1/main.py", line 546, in main count_train) File "/home/user1/main.py", line 618, in train for i, (input, target) in enumera
【pytorch字典TypeError: batch must contain tensors, numbers, dicts or lists； found ＜class ‘NoneType‘＞】
weixin_43466026的博客
01-23 1148
字典定义 "name": null, "shape": "258", "list": [], 使用DataLoader从json文件读取： from torch.utils.data import Dataset, DataLoader dataProvider = DataProvider() train_loader = DataLoader(dataProvider) 报错 raise TypeError((error_msg.format(type(batch[0]))))
自定义数据集DataLoader迭代载入时报错“＜class ‘NoneType‘＞”
Pak00000的博客
11-23 3281
Pytorch中DataLoader自定义数据集载入时报错“TypeError: default_collate: batch must contain tensors, numpy arrays, numbers, dicts or lists; found 《class 'NoneType'》”问题描述产生原因解决办法程序展示总结 问题描述 创建自己的数据集并用DataLoader载入时报出如下错误： 产生原因 该问题表明在用迭代器循环载入数据及标签时，存在某一数据类型为’None’ 解决办法 提前剔
jupyter 挂掉的内核和transform=torchvision.transforms.ToTensor()
teletubbies的博客
09-01 743
jupyter 挂掉的内核和transform=torchvision.transforms.ToTensor()
AttributeError: 'NoneType' object has no attribute 'dataloader'
最新发布
07-28
这个错误是由于对象的属性为None而导致的。在引用\[1\]中，错误是由于对象的属性'text'为None而引起的。在引用\[2\]中，错误是由于对象的属性'device'为None而引起的。在引用\[3\]中，错误是由于对象的属性'dataloader'为None而引起的。 要解决这个错误，你需要检查代码中的对象是否正确初始化，并确保属性不为None。你可以使用条件语句或异常处理来处理这种情况，以避免出现'NoneType' object has no attribute的错误。 #### 引用[.reference_title] - *1* [Python学习笔记：‘’AttributeError: NoneType object has no attribute‘’](https://blog.csdn.net/lvsehaiyang1993/article/details/80910104)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [报错：AttributeError: NoneType object has no attribute device](https://blog.csdn.net/o0haidee0o/article/details/106903488)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

坠金

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值