CUDA是英伟达推出的并行计算架构,全称为Compute Unified Device Architecture。其实就是CPU加上GPU。
那GPU是什么呢?GPU一开始是用来做图像处理的,所以又称为图像处理器,算是一种微处理器。我们的电脑上不一定带有GPU哦,好点的电脑才有。
我们现在的电脑手机上面都有CPU,我们可以边聊微信边看电影边吃鸡,感觉这些事件似乎在同时发生一样。其实是CPU欺骗了我们,CPU切换的太快了,我们感觉不到。因此觉得这些程序这些进程貌似同时在跑在运行一样,也就是程序在并行执行一样,其实不是的,一般都是等上一个时间片跑完了然后再切换(这个要看真正的实际的物理核),但是CPU上面常常跑几十上百个线程,一般系统肯定是没有这么多的物理线程的,都是逻辑线程,所以并不是真正意义上的并行。
说到并行,那什么是并行呢?其实就是字面意思,就是两个或者两个以上的人并排走路。
从软件程序上来说,举个例子,你要吃饺子,没有大蒜和酱油,于是你分别叫小明去打酱油叫小红去买大蒜。有两种方案:一种是同时去买,两人同时去买大蒜和酱油,也就是并行;另外一种是小红等小明去买完了酱油回来之后再去买大蒜,也就是串行。很显然串行的时间很慢&#x