ValueError: array split does not result in an equal division

最新推荐文章于 2024-11-12 18:46:39 发布

weixin_43943543

最新推荐文章于 2024-11-12 18:46:39 发布

阅读量4.2k

点赞数 2

文章标签： python

本文链接：https://blog.csdn.net/weixin_43943543/article/details/123991537

版权

X_train_shards = np.split(X_train_permuted, args.k)
Y_train_shards = np.split(Y_train_permuted, args.k)

原因：
元素个数不能被args.k整除，导致array不能被等分
解决：
X_train, Y_train = X_train[0:806840], Y_train[0:806840]

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_43943543

关注关注

2
点赞
踩
0

收藏

觉得还不错? 一键收藏
4
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

MindSpore跑模型并行报错ValueError: array split does not result in an equal division

2401_85200798的博客

05-22

471

根据报错是slpit的输入的shape不能被size整除，所以报错，我们Parameter原始shape信息是(640,5120), mp(模型并行数)是8。但是报错时成了（10， 5120）显然是经过了二次切分导致。也就是说上面代码中compile会执行一次编译，在for循环时net_with_grade(train_token_idx, train_atten_mask)又会执行一次编译导致出现二次切分。正如前述，加载预训练模型之后报错，我们在报错位置打印出了当时的shape信息，如下。

Python常见错误

weixin_44915226的博客

02-05

507

TypeError: ‘list’ object is not callable 将列表转换为元组时错误： #coding=utf-8 list=[1,2,3] tup=(7,8,9) list2=list(tup) print(list2) 提示错误： TypeError: ‘list’ object is not callable（类型错误：“list”对象不可调用） list被赋值，删除...

4 条评论您还未登录，请先登录后发表或查看评论

Python中的np.split与MXNet中的nd.split的一些用法区别

深度学习领域优质创作者，CSDN博客专家

11-20

886

维度里的数据的切分

NumPy数组的其他用法

qq_41937821的博客

03-30

1157

数组迭代，连接和拆分

numpy(八)——数组分割

weixin_40321125的博客

05-04

926

numpy(八)——数组分割 import numpy as np arr = np.arange(42).reshape(6,7) arr array([[ 0, 1, 2, 3, 4, 5, 6], [ 7, 8, 9, 10, 11, 12, 13], [14, 15, 16, 17, 18, 19, 20], [21, 22, ...

Python-Numpy模块入门

Seere的博客

06-30

489

Numpy使用入门为什么要使用Numpy？ numpy是采用c语言编写的数据分析模块，消耗资源少、采用的是矩阵运算，比python自带的字典或者列表快很多。Numpy应该怎么安装呢？一般通过命令行即可安装： sudo pip3 install numpy(采用python3版本） sudo pip install numpy(采用python2版本)Numpy基本属性：ndim、shape、si...

array_split

08-18

这两个函数的唯一区别是np.split()必须是等分，否则会抛出异常ValueError: array split does not result in an equal division。这两个函数的用法与np.array_split和np.split类似，只需要指定分割后的子数组个数即可...

Numpy array 分割

IT浪尖

02-15

3346

#Numpy array 分割 import numpy as np #建立3行4列array A = np.arange(16).reshape(4,4) print(A) """ [[ 0 1 2 3] [ 4 5 6 7] [ 8 9 10 11]] """ # 纵向分割 print(np.split(A,2,axis = 1)) #横向分

python Numpy

minione_2016的博客

11-21

920

CS231n课程笔记翻译：python Numpy教程之前一直用的caffe+matlab,现在因为用到python+tensorflow，所以抽个时间快速地把python梳理一遍，python比较基础就不记录了，主要记录下numpy一维矩阵基础操作import numpy as np a=np.array([10,20,30,40]) # array([10, 20, 30, 40]) b=n

【Java报错已解决】ValueError: All arrays must be of the same length

热门推荐

mingyuli的博客

07-26

6万+

1、split(ary, indices_or_sections, axis=0) :把一个数组从左到右按顺序切分参数： ary:要切分的数组 indices_or_sections:如果是一个整数，就用该数平均切分，如果是一个数组，为沿轴切分的位置（左开右闭） axis：沿着哪个维度进行切向，默认为0，横向切分。为1时，纵向切分 >>> x = np.arange...

python ndarray合并_Python干货-Numpy的ndarray的合并与分割

weixin_39679718的博客

12-04

3559

# 导入numpyimport numpy as npndarray的合并定义要使用的数据源a = np.array([1, 1, 1])b = np.array([2, 2, 2])print('a', a)print('b', b)a [1 1 1]b [2 2 2]numpy.vstack()函数语法：vstack(tup)，参数是一个元组，它可将元组中指定的数组进行合并# 将a与b合并c ...

Numpy中的np.split()函数详解

Kobaayyy的博客

03-22

1万+

np.split（）函数详解 1.官方注释2.参数解释3.例子参考 NumPy(Numerical Python) 是 Python 语言的一个扩展程序库，支持大量的维度数组与矩阵运算，此外也针对数组运算提供大量的数学函数库。np.split()函数的作用是将一个数组拆分为多个子数组，跟Tensorflow中的slice（）函数有点类似，但是np.split()函数返回的是多个数组，tf.slic...

python数组分割为多份_10-Python-NumPy数组分割

weixin_39675679的博客

01-11

6132

np.array_split()&np.split()

coder

03-13

2万+

np.split(): 大小要么按照数字来划分（int），要么是一个list来划分：但是如果你仅是输入一个int类型的数字的话，你的数组必须是均等的分割，否则就会报错，不像array_split()是可以进行不均等的划分的！ >>> x = np.arange(9.0) >>> np.split(x, 3) [array([ 0., 1., 2.]), array([ 3., 4.,

【Numpy】拆分数组

Graduate2015的博客

06-29

5745

文章目录前言1. split2. array_split3. dsplit4. hsplit5. vsplitReference 前言本篇总结、介绍Numpy数组（ndarray）的基本操作之一——拆分数组 [1]。 1. split numpy.split(ary, indices_or_sections, axis=0)：将一个数组拆分为多个子数组，每个子数组都是原始数组的视图 ary：类数组。待拆分数组 indices_or_sections：整数或一维类数组整数：例如n，表示数组ary将沿指

Python Numpy常用操作

丑小鸭

08-14

2967

1 np.split(): Parameters: ary : ndarray Array to be divided into sub-arrays. indices_or_sections : int or 1-D array If indices_or_sections is an integer, N, the array ...