对比SIMD(Vector ALU) 和Scalar ALU

于 2022-03-04 20:59:05 发布
阅读量670 收藏 2
点赞数
文章标签： gpu gpgpu 人工智能 ai
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jinre2/article/details/123285176
版权
本文分析了NV的计算单元采用Scalar ALU而非常见的SIMD架构的原因。尽管SIMD在指令密集型任务中表现出更高的效率，Scalar ALU简化了编译器和调度器的设计，减少了调度复杂性，可能解释了CUDA易用性的优势。然而，在相同晶体管数量下，AMD的理论计算性能更高。关键在于调度效率，NV的调度效率被认为是其优势所在。
摘要由CSDN通过智能技术生成

今天发现NV的计算单元居然是Scalar ALU, 挺意外啊，

AMD,Imagination, Intel, Qualcomm的平台都是用的SIMD

按照理论分析，SIMD的指令密集度肯定更高

全部用Scalar ALU的好处是编译器，调度器更加容易实现，调度也不容易有泡泡

这也可能是NV的Cuda确实好用的一个原因，

对比了AMD和NV在相同晶体管下的理论计算性能，确实AMD的更高。

但是关键还是调度的效率，NV的调度效率肯定更好了

jinre2
关注
TPU原理技术与xPU
吴建明wujianming_110117
06-01 2250
TPU原理技术与xPU
关于超标量、超级流水线、超长指令字、向量机（习题）
Gabriel的专栏
04-15 3648
1、超标量（Super Scalar)    将一条指令分成若干个周期处理以达到多条指令重叠处理,从而提高cpu部件利用率的技术叫做标量流水技术.    超级标量是指cpu内一般能有多条流水线,这些流水线能够并行处理.在单流水线结构中,指令虽然能够重叠执行,但仍然是顺序的,每个周期只能发射(issue)或退休(retire)一条指令.超级标量结构的cpu支持指令级并行,每个周期可以发射多条指令(2
CPU设计与实现(8位）
NPC的博客
08-13 7857
文章目录CPU整体结构指令系统设计1. 指令格式分类2. 指令的分组及节拍逻辑设计CPU模块表各指令的控制信号值1. 取指令逻辑2. 指令译码逻辑3. 指令执行逻辑4. 存储器访问逻辑5. 结果写回逻辑各模块说明(1) ALU(2) 数据选择器BUS_MUX(3) 器件T1(4) 标志寄存器FLAG_REG(5) T2(6) 程序计数器PC(7) 地址寄存器AR和指令寄存器IR(8) 寄存器、寄存器组和寄存器的选择(9) 节拍发生器TIMER(10) 控制逻辑(11) T3(12) REG_OUT连通模块测
Vector向量计算技术与SIMD技术的对比
Roy_Wu314的博客
08-30 2736
关键词：RISC-V处理器 ,平头哥玄铁CPU，RISC-V指令集，IoT芯片，Vector，SIMD技术 什么是向量计算技术？什么是SIMD技术？它们之间有什么区别？看到这个标题的时候，可能各位读者都会有各种各样的疑问。那么本文，笔者将基于RISC-V指令集，尽量以简单易懂的方式，向大家介绍二者的联系和区别，并分析RISC-V向量计算技术的优劣。 一、SIMD技术简述 传统的通用处理器都是标量处理器，一条指令执行只得到一个数据结果。但对于图像、信号处理等应用，存在大量的数据并行性计算操作，这
探索.NET平台中的SIMD内在函数Vector
冯辉
12-01 364
概述 Vector(向量)是一种序列式容器，事实上和数组差不多，但它比数组更优越。一般来说数组不能动态拓展，因此在程序运行的时候不是浪费内存，就是造成越界。而Vector刚好弥补了这个缺陷，它的特征是相当于可分配拓展的数组(动态数组)，它的随机访问快，在中间插入和删除慢，但在末端插入和删除快。 什么是SIMD？ SIMD是Single Instruction Multiple Data的...
SIMD Vector vs. Manycore
weixin_34186128的博客
06-14 154
其实这俩作为DLP和TLP的重要成员，并不冲突 只是可以各自的相对极端一点，因而衍生出Larrabee和Fermi——这俩的差距不光是ISA和把Geometr/Pixel仍给Program那么简单。 只是自己依然不会做对比呢。看来这方面的算法需要接触一下了。 转载于:https://www.cnblogs.com/edge/archive/2011/06/14/2080920.html...
Designing Fast Cross-Platform SIMD Vector Libraries
安柏霖的专栏
02-02 3102
是对这篇文章的笔记：http://www.gamasutra.com/view/feature/4248/designing_fast_crossplatform_simd_.php?utm_source=feedburner&utm_medium=feed&utm_campaign=Feed:+GamasutraFeatureArticles+(Gamasutra+Feature+Artic
OpenBlas, Neon & VFP
Walk More Slowly
09-05 2296
OpenBlasIn scientific computing, OpenBLAS is an open source implementation of the BLAS (Basic Linear Algebra Subprograms) APIwith many hand-crafted optimizations for specific processor types. It is dev
GPU显卡架构
吴建明wujianming_110117
10-21 1507
GPU显卡架构 GPU架构“征途之旅”即日起航 如果成为一个资深DIY玩家，想与众多DIY高手“高谈阔论”GPU架构设计，先必须弄明白显卡GPU架构设计的基本思想和基本原理，读懂GPU架构图正是这万里长征的第一步。 GPU显卡架构图 分析如下问题： 一、顶点、像素、着色器是什么； 二、SIMD与MIMD的架构区别； 三、A/N在统一渲染架构革新中的三次交锋情况如何； 四、为什么提出并行架构设计； 五、A/N两家在GPU架构设计的特点及异同点是什么。 非统一架构时代的GPU架构组件 上世纪的绝大多数显示
计算机专业英语名词翻译.pdf
10-09
管道处理（pipeline processing）、组合电路（combinational circuit）、乘法器（multiplier）、加法器（adder）、时钟脉冲（clock pulse）、向量处理（vector processing）、一维数组（one-dimensional array）、...
使用STL vector 作为XNAMath快速灵活的SIMD数据容器
逍遥剑客
12-29 3067
原文链接: http://www.qsoftz.com/mirza/?p=59简介这篇文章是关于如何将传统的STL vector作为XNAMath类型容器使用. 因为SSE/SSE2指令集要求数据必须对齐到16字节的边界, 所以vector的分配器必须替换成一个可以对齐的内存分配器(x86架构). 本文适用于想在代码中引入新鲜空气的x86 Windows开发者, 你将会看到如何把强大的XNAMat
Scalar, Vector, Matrix, Tensor, Array 傻傻分不清楚，看完这篇可视化你就明白！
qq_34604224的博客
07-16 1万+
目录 Scalar（标量） Vector（向量） Matrix（矩阵） Tensor（张量） Array（数组） 先上两张图感受下，Scalar-Vector-Matrix-Tensor的过程即从单个数值到一维到二维一直不断增加维度的数据结构。 Scalar（标量） Vector（向量） Matrix（矩阵） Tensor（张量） Array（数组） ...
[verilog]ALU的实现
saber_jk的博客
04-12 1万+
博客地址转至https://xisynotz.xyz `timescale 1ns / 1ps ////////////////////////////////////////////////////////////////////////////////// // Company: // Engineer: // // Create Date: 16:44:32 03/29/20...
SIMD指令初学
mick_seu的博客
04-05 2万+
参考自：http://blog.csdn.net/gengshenghong/article/details/7008704（。。。。） SIMD 即 single instruction multiple data，单指令流多数据流，也就是说一次运算指令可以执行多个数据流，这样在很多时候可以提高程序的运算速度。 SIMD是CPU实现DLP（Data Level Para
SIMD初学
qq_40406891的博客
11-28 2584
SIMD初学 在学习SIMD之前，我们首先需要了解什么是标量与矢量。 浮点运算指令分为两大类：Packed（矢量） 和Scalar（标量）。 Packed指令是一次对寄存器中的四个浮点数（即DATA0 ~ DATA3）均进行计算，而Scalar一次则只对寄存器中的DATA0进行计算。如下图所示： *1.SIMD的历史与分类 SIMD(Single Instruction Multiple Dat...
SIMD指令集——一条指令操作多个数，SSE，AVX都是，例如：乘累加，Shuffle等
djph26741的博客
11-07 1702
SIMD指令集 from：https://zhuanlan.zhihu.com/p/31271788 SIMD，即Single Instruction, Multiple Data，一条指令操作多个数据．是CPU基本指令集的扩展．主要用于提供fine grain parallelism，即小碎数据的并行操作．比如说图像处理，图像的数据常用的数据类型是RGB565, RGBA8...
关于移动gpu 炮神文
Embeded system Development
05-08 1827
本文作者为爱搞机特约作者、技术达人“炮神”@ioncannon。 本文将从移动GPU的结构、参数、兼容性、跑分几方面让读者全方位对移动GPU有一定的概念。由于篇幅较长，分成两部分介绍，这是第一部分，讲解的是移动GPU的结构和相关参数。   前言 现在移动设备的“核战”越来越激烈，已经从CPU引发到了GPU上，于是“16核”、“8管线”、“MP4”、“三角形生成率”和“填充率
C++中使用SIMD的几种方法
热门推荐
06-02 3万+
图7列出了使用SIMD技术的多种方法，我们先按从上至下的顺序简要介绍每一种，然后重点介绍汇编语言方法。图7 使用SIMD技术的多种方法第一种方法是使用著名的IPP库，IPP的全称是Intel Integrated Performance Primitives， 是英特尔公司开发的一套跨平台软件函数库，提供了非常广泛的功能，包括各种常用的图形图像、音视频处理函数。因为其中的很多函数都已经使用SIMD...
SISD SIMD(vector machine) MIMD
最新发布
06-10
SISD、SIMD、MIMD是计算机中并行计算的三种基本形式。 1. SISD (Single Instruction, Single Data) 单指令流单数据流：指采用单个处理器按照程序顺序执行单个指令流，每个指令仅处理单个数据的计算机系统。是最早的计算机结构，典型的代表是冯·诺依曼结构的计算机。 2. SIMD (Single Instruction, Multiple Data) 单指令流多数据流：指采用多个处理器同时执行同一条指令，但是每个处理器处理的数据不同的计算机系统。典型的代表是向量处理机。 3. MIMD (Multiple Instruction, Multiple Data) 多指令流多数据流：指采用多个处理器，每个处理器按照程序顺序执行不同的指令流，处理不同的数据流的计算机系统。是目前并行计算的主流形式，典型的代表是多处理器系统和集群系统。 在并行计算中，SISD、SIMD和MIMD三种基本形式都有其独特的优缺点和适用范围，需要根据具体的应用场景和需求来选择合适的并行计算方式。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值