作者:知乎用户
链接:https://www.zhihu.com/question/19903344/answer/96081382
来源:知乎

CPU和GPU之所以大不相同,是由于其设计目标的不同,它们分别针对了两种不同的应用场景。CPU需要很强的通用性来处理各种不同的数据类型,同时又要逻辑判断又会引入大量的分支跳转和中断的处理。这些都使得CPU的内部结构异常复杂。而GPU面对的则是类型高度统一的、相互无依赖的大规模数据和不需要被打断的纯净的计算环境。

  于是CPU和GPU就呈现出非常不同的架构(示意图):

  图片来自nVidia CUDA文档。其中绿色的是计算单元,橙红色的是存储单元,橙黄色的是控制单元。

GPU采用了数量众多的计算单元和超长的流水线,但只有非常简单的控制逻辑并省去了Cache。而CPU不仅被Cache占据了大量空间,而且还有有复杂的控制逻辑和诸多优化电路,相比之下计算能力只是CPU很小的一部分

  从上图可以看出:

Cache, local memory: CPU > GPU

Threads(线程数): GPU > CPU

Registers: GPU > CPU 多寄存器可以支持非常多的Thread,thread需要用到register,thread数目大,register也必须得跟着很大才行。

SIMD Unit(单指令多数据流,以同步方式,在同一时间内执行同一条指令): GPU > CPU。

CPU 基于低延时的设计:

CPU有强大的ALU(算术运算单元),它可以在很少的时钟周期内完成算术计算。

当今的CPU可以达到64bit 双精度。执行双精度浮点源算的加法和乘法只需要1~3个时钟周期。

CPU的时钟周期的频率是非常高的,达到1.532~3gigahertz(千兆HZ, 10的9次方).

大的缓存也可以降低延时。保存很多的数据放在缓存里面,当需要访问的这些数据,只要在之前访问过的,如今直接在缓存里面取即可。

复杂的逻辑控制单元。当程序含有多个分支的时候,它通过提供分支预测的能力来降低延时。

数据转发。 当一些指令依赖前面的指令结果时,数据转发的逻辑控制单元决定这些指令在pipeline中的位置并且尽可能快的转发一个指令的结果给后续的指令。这些动作需要很多的对比电路单元和转发电路单元。

GPU是基于大的吞吐量设计。

GPU的特点是有很多的ALU和很少的cache. 缓存的目的不是保存后面需要访问的数据的,这点和CPU不同,而是为thread提高服务的。如果有很多线程需要访问同一个相同的数据,缓存会合并这些访问,然后再去访问dram(因为需要访问的数据保存在dram中而不是cache里面),获取数据后cache会转发这个数据给对应的线程,这个时候是数据转发的角色。但是由于需要访问dram,自然会带来延时的问题。

GPU的控制单元(左边黄色区域块)可以把多个的访问合并成少的访问。

GPU的虽然有dram延时,却有非常多的ALU和非常多的thread. 为啦平衡内存延时的问题,我们可以中充分利用多的ALU的特性达到一个非常大的吞吐量的效果。尽可能多的分配多的Threads.通常来看GPU ALU会有非常重的pipeline就是因为这样。

所以与CPU擅长逻辑控制,串行的运算。和通用类型数据运算不同,GPU擅长的是大规模并发计算,这也正是密码破解等所需要的。所以GPU除了图像处理,也越来越多的参与到计算当中来。

GPU的工作大部分就是这样,计算量大,但没什么技术含量,而且要重复很多很多次。就像你有个工作需要算几亿次一百以内加减乘除一样,最好的办法就是雇上几十个小学生一起算,一人算一部分,反正这些计算也没什么技术含量,纯粹体力活而已。而CPU就像老教授,积分微分都会算,就是工资高,一个老教授资顶二十个小学生,你要是富士康你雇哪个?GPU就是这样,用很多简单的计算单元去完成大量的计算任务,纯粹的人海战术。这种策略基于一个前提,就是小学生A和小学生B的工作没有什么依赖性,是互相独立的。很多涉及到大量计算的问题基本都有这种特性,比如你说的破解密码,挖矿和很多图形学的计算。这些计算可以分解为多个相同的简单小任务,每个任务就可以分给一个小学生去做。但还有一些任务涉及到“流”的问题。比如你去相亲,双方看着顺眼才能继续发展。总不能你这边还没见面呢,那边找人把证都给领了。这种比较复杂的问题都是CPU来做的。

  总而言之,CPU和GPU因为最初用来处理的任务就不同,所以设计上有不小的区别。而某些任务和GPU最初用来解决的问题比较相似,所以用GPU来算了。GPU的运算速度取决于雇了多少小学生,CPU的运算速度取决于请了多么厉害的教授。教授处理复杂任务的能力是碾压小学生的,但是对于没那么复杂的任务,还是顶不住人多。当然现在的GPU也能做一些稍微复杂的工作了,相当于升级成初中生高中生的水平。但还需要CPU来把数据喂到嘴边才能开始干活,究竟还是靠CPU来管的。

什么类型的程序适合在GPU上运行?

  (1)计算密集型的程序。所谓计算密集型(Compute-intensive)的程序,就是其大部分运行时间花在了寄存器运算上,寄存器的速度和处理器的速度相当,从寄存器读写数据几乎没有延时。可以做一下对比,读内存的延迟大概是几百个时钟周期;读硬盘的速度就不说了,即便是SSD, 也实在是太慢了。

  (2)易于并行的程序。GPU其实是一种SIMD(Single Instruction Multiple Data)架构, 他有成百上千个核,每一个核在同一时间最好能做同样的事情。

CPU 和 GPU 的区别是什么相关推荐

  1. cpu和gpu的区别是什么?GPU是显卡吗?

    CPU,在电脑中起着控制计算机运行的作用,是电脑的中央处理器. GPU是一个附属型的处理器,主要处理计算机中与图形计算有关的工作,并将数据更好地呈现在显示器中. 只有CPU和GPU合作,才能最大程度上 ...

  2. CPU和GPU的区别是什么?为什么训练人工智能用GPU而不是CPU?

    CPU(Central Processing Unit,中央处理器)是计算机的大脑,负责执行计算机程序中的指令.它从内存中读取指令和数据,并执行各种计算和逻辑运算.CPU的性能决定了计算机的运算速度. ...

  3. CPU与GPU区别 通俗易懂

    为什么二者会有如此的不同呢?首先要从CPU和GPU的区别说起. CPU和GPU之所以大不相同,是由于其设计目标的不同,它们分别针对了两种不同的应用场景.CPU需要很强的通用性来处理各种不同的数据类型, ...

  4. CPU与GPU区别大揭秘

    有网友在网上提问:"为什么现在更多需要用的是 GPU 而不是 CPU,比如挖矿甚至破解密码? "以下是比较准确靠谱的回答: 1.现在更多被需要的依然是CPU,只是GPU在大规模并发 ...

  5. CPU和GPU跑深度学习差别有多大?

    作者:带萝卜 链接:https://www.zhihu.com/question/273812506/answer/1271840613 来源:知乎 著作权归作者所有.商业转载请联系作者获得授权,非商 ...

  6. intel第6代服务器芯片,Intel第六代处理器 Skylake CPU、GPU、主板完全解析

    CPU 篇 时间过的很快,对于老玩家来说,今年已经迎接第六代 Intel 处理器,当然这还不算古早时期的 Intel 产品.第六代处理器架构命名为 Skylake,根据 Intel 的 TIck-To ...

  7. tensorflow的CPU和GPU的区别

    最近深度学习CPU根本不够用,老板配置了GPU 怎么能不会用呢? 原来从来没有关注过的底层东西,于是乎痛下决心搞清楚原理和操作 先来看看第一部分 为什么GPU比CPU更diao呢? 这里就需要从他么的 ...

  8. unity渐进式烘焙Progressive CPU和GPU

    体验过多个版本的同学应该发现了,随着unity版本的更新,Enlighten的烘焙方式由于Geomerics公司的停止维护也被unity官方逐渐舍弃掉了,现在剩下的就是渐进式烘焙CPU或者GPU了.本 ...

  9. CPU,GPU,Memory调度

    CPU,GPU,Memory调度 HDD&Memory&CPU调度机制(I/O硬件性能瓶颈) 图1. HDD&Memory&CPU调度图 CPU主要就是三部分:计算单元 ...

最新文章

  1. 在Eclipse中配置Tomcat服务
  2. Terminal(终端) 在 OS X下如何快速调用
  3. 数学建模——智能优化之遗传算法详解Python代码
  4. ECMA-335(CLI)标准 读书笔记(第一部:概念和架构 第7章)
  5. 做到我这样,你也能拿到京东Offer
  6. 来了!PostgreSQL 同步流复制原理和代码浅析,请签收
  7. FD.io VPP:CentOS7下构建自己的VPP RPM包
  8. java 图片地址,java中图片地址存入数据库
  9. Linux 用户he用户组管理
  10. oracle数据库小总结(2017年7月10日)
  11. 项目常用工具类整理(二)--ckeditor的引用
  12. Objective-C中的单例模式
  13. 车牌定位html5,车牌识别(一)——车牌定位(附详细代码及注释)
  14. 网易邮箱(126/163):授权码获取攻略
  15. 计算机网络学习笔记11(P2P)
  16. #读书笔记# 《人类简史》Chapter7
  17. 锐利特科技物联网云平台解决方案
  18. 完善有载调压开关遥调、遥信功能
  19. linux重命名文件或文件夹(mv命令 rename命令)
  20. 分众传媒CEO江南春:没钱是这个社会进步最大的动力

热门文章

  1. 花厂-nat转换四种类型
  2. 加载默认图片,如何避免img标签陷入onerror事件死循环
  3. 5,10,15,20-四(4-羧基苯基)卟啉(H2TCPP)齐岳供应CuCdTCPP,CoCdTCPP和三金属CuCoCdTCPP配位聚合物
  4. Unity的基础小知识
  5. ubuntu22.04下安装微信
  6. 目录扫描Dirbuster的用法详解
  7. 计算机求解数独问题S
  8. 最小割(Stoer-Wagner算法)
  9. java如何做一个奖牌榜_编写一个成绩统计的java程序。
  10. jquery循环遍历radio单选按钮,并设置选中状态