作为一个深度学习的初学者,你可能会遇到这样的问题:“我该如何训练我自己或者别人的Model?”“我该如何配置一台合适的主机?”“目前有哪几种训练模型的方式?”
接下来,我将会对此进行详细的介绍,当然,这只是我个人的一些观点,如有不对的地方还希望大家能够体谅!

文章目录

  • 一、 目前有哪几种训练模型的方式?
  • 方案一:配置一个“本地服务器”--通俗来说就是一台“高配”电脑。
  • 方案二:配置一台自己的“云服务器主机
  • 方案三:配置一个“深度学习集群"
  • 二、 我该如何配置一台自己主机呢?
  • 注意事项

一、 目前有哪几种训练模型的方式?

方案一:配置一个“本地服务器”–通俗来说就是一台“高配”电脑。

优点:比较自由,不受约束。
缺点:价格昂贵,需要考虑金钱问题。(配置一台初级的深度学习主机大概需要1.5w左右,具体细节请看下文)
适用情况:
1)你本人有充足的的资金;
2)需要发表论文,多次训练自己的Model;
3)尝试运行别人的Model;
4)想要从事深度学习领域的研究;

方案二:配置一台自己的“云服务器主机

优点:可以按照项目的需要选择合适的配置,比较灵活。
缺点:针对个人来讲,价格还是比较贵的。
适用情况:
1)由于项目的需要,需要使用到深度学习,需要训练Model;
2)初创企业
注:根据我个人的了解,当前云服务器的计费方式主要有两种:按时计费、按月计费和按年计费。国内有的公司提供了相应的GPU服务器和FPGA服务器平台,但是还处于测试阶段。详细的介绍请看下文。

方案三:配置一个“深度学习集群"

优点:更快更高效的获得自己的Model,即加快开发的效率;
缺点:对于个人来讲不太现实,一般是大公司的选择;
适用情况:
1)具有雄厚基金的大公司,如BAT等都有自己的深度学习集群平台和自己的深度学习框架;
2)深度学习领域的初创公司;以上就是3种训练Model的方式,下面我将会给出一些有用的云服务器连接,感兴趣的同学可以自己探索。

  1. 百度AI云服务器,支持PaddelPaddel和Tensorflow
  2. 腾讯云服务器,支持GPU云服务器和FPGA云服务器,后者处于内测阶段
  3. 阿里云服务器,支持GPU云服务器和FPGA云服务器,后者处于内测阶段
  4. 华为机器学习云服务器
  5. 微软云服务器,国内不支持GPU服务器,北美支持
  6. 联众集群,一个专业的GPU集群解决方案提供商

二、 我该如何配置一台自己主机呢?

要配置一台深度学习主机,你需要选择合适的CPU、GPU、内存条、固态硬盘、电源、散热、机箱、主板等(最好支持PICE,应用于多GPU的其概况下)。下面进行详细的解读:

GPU:即图像处理单元,最为一个并行处理器,起初是专门用来处理图像的,但是由于大数据的驱动,如今的它已经广泛的应用到了多个领域中,包括“深度学习”“智能驾驶”“VR”等。

由于它可以利用多个线程来进行高速的矩阵运算,而深度学习中会涉及到很多的矩阵运算。这正是它的用武之地。因此选择一个合适的GPU变得“至关重要”。

深度学习中常用的GPU包括:GTX960,GTX970,GTX1080, TiTan x,GTX1080Ti等,以上的GPU都属于GeForce系列,进行“单浮点运算”,都是一些比较新的型号具有很强的性能,按照以上的顺序性能依次提升,最主要的改变是在“架构和SM(线程个数)”方面,960,970都属于“Maxwell架构”,而后三者都是“Pascal架构”。当然他们的价格也是逐渐升高,你需要根据自己的资本选择合适的GPU。总之“一个好的GPU可以将你的训练时间从几周缩减成几天”。

如果资金充足,建议选择后三者。

CPU:作为一个高速的串行处理器,常用来作为“控制器”使用,用来发送和接收指令,解析指令等。

深度学习为什么需要CPU?期初的我也不明白原因。但是阅读了一些资料以后,我开始有了自己的见解。最主要的原因是:由于GPU内部结构的限制,使得它比较适合进行高速的并行运算,而并不适合进行快速的指令控制,而且许多的数据需要在GPU和CPU之间进行存取,这就需要用到CPU,因为这是它的强项。

总之,对于深度学习来说,对CPU的要求不是特别高,你需要记住一个原则是“你需要选择一个好的GPU,一个较好的CPU”,这样可以节约一部分成本,同时有相似的性能。

内存条:大家对它都很熟悉,主要进行CPU和外设之间的数据交换,它的存取速度要比硬盘快好几倍,但是价格比较昂贵,通常会和容量成正比。

在深度学习中,会涉及到大量的数据交换操作(例如按batch读取数据)。当然你也可以选择将数据存储在硬盘上,每次读取很小的batch块,这样你的训练周期就会非常长。常用的方案是“选择一个较大的内存,每次从硬盘中读取几个batch的数据存放在内存中,然后进行数据处理”,这样可以保证数据不间断的传输,从而高效的完成数据处理的任务。

这里还有一个不成文的规定:即你的内存大小最起码要大于你所选择的GPU的内存的大小。那个根据这个规定你很块就可以确定你可以选择的内存的容量,通常选择16GB,如果你有足够的资金,可以考虑购买一个32GB的内存,这会在训练较大的模型时展现它的优势。这里值的你去投资。

固态硬盘:作为一个“本地存储器”,它是每个电脑不可或缺的一部分。你需要在它上面存储一些重要的信息。由于其速度较慢,价格自然也比较便宜。根据市场的价格,1T的硬盘也就300多。

在深度学习中,硬盘可以用来“保存代码”“保存Model”“保存中间结果”“保存数据集”等。建议你选择一个较大容量的硬盘,通常会选择1T/2T。因为你可能会发现一般的数据集就是几个G,同时深度学习本身就是基于“大数据”的,它需要许多的数据来获得较好的性能。这也是众所周知的。一个好的方法是:“你可以利用上一些旧的硬盘,因为硬盘的扩展十分简单,这样可以节省一部分资金。”

散热:由于电子设备的运转会产生大量的热,而每个电子元件都有一个可承受的温度范围,过高或者过低的温度通常会导致元器件不能处于正常的工作状态,导致这个主机的性能变差。

由于深度学习设计到很大的计算量,通常需要几小时或者几十或者几百个小时的训练,在这期间要保证元器件的正常工作,就需要做好相应的散热措施。这样既可以保证主机的效率,同时也可以延长主机的使用寿命。
常用的散热措施主要有4种:
1)通过设置BIOS选项,具体的细节在网上搜索。
2)添加散热片。它通常由铝或铜制成,通常安装在CPU或者GPU等原件的周围或者上面。铜制品通常会有更好的散热效果。
3)添加散热风扇。如今每台台式电脑或者笔记本电脑可能都会配有一个或者多个风扇来进行扇热,正是由于风扇的原因,你通常会听到一部分噪声。
4)添加水冷。如果你是一个游戏狂热者,你可能会对它比较熟悉。它通常用在高配的游戏主机上面,不仅具有很好的散热效果,同时基本上没有什么噪声。但是它的价格会比较高。如果你的主机配置了多个GPU,强烈建议你配置水冷,这可以持续的保持你的设备处于高速的运转中。

上张帅气的水冷照片。

主板:现在应该轮到它啦。这个东西对于电子专业的人来说都很熟悉。就是一个用来组装电路的PCB板。你需要将很多个元器件组装在它上面,然后通过焊锡来连接它。

对于深度学习来讲,最重要的就是内存和PCIE的卡槽啦。它会涉及到后期的拓展。如果你后期可能会扩展你的设备,那你就需要考虑主板的可拓展性。如果你不需要进行后期的拓展,那么你可以买一个相对便宜的主板,只需要满足你当前的需求即可。为什么要强调PCIE,作为一个高速的传输接口,它常常用来设备之间的通信,例如CPU和GPU或者GPU与GPU。如果你后期可能会拓展你的GPU个数,那么建议你选择带有PCIE3.0 x8和x16接口的主板。

常用的主板有“超星微的X10SRA、C602、C612”等,总之,选择主板时需要在满足你的最低要求的同时考虑到拓展性。

机箱:欧,差点都把它给忘啦。有了以上的硬件之后,你还需要一个东西将它们组合成为一个整体,从而便于携带。哈哈,这个东西就是“机箱”。机箱上面会有各种卡槽和接口,包括硬盘、主板、电源等。

它的选择比较简单,只需要考虑硬盘和主板的尺寸即可。即要能将硬盘安装进去,这也是最低的要求啊。

好啦,以上就是你需要选择的一些设备。相信你应该明白啦。我的目目标是“让你知其然,而且知其所以然”。我更想让你知道的是为什么需要这些东西,而且说明了它们的作用,以及深度学习对它们的要求。

上几张高大上的配置服务器吧。。。

好了,以上就是我个人的一些见解,希望对大家有帮助。这个我自己原创,希望大家能支持原创。如果需要转载,需要经过我的同意。同时也欢迎大家提出问题,一起学习,一起进步。
邮箱:1575262785@qq.com

注意事项

[1] 本文业余时间承接本科毕设和各种个人项目,具体包括图像处理(数据挖掘、机器学习和深度学习等)、matlba仿真、python算法和仿真等,需要的请加QQ:1575262785。

如何配置一台深度学习主机?相关推荐

  1. 如何配置一台深度学习的主机

    配置深度学习主机 首先需要整一台GPU的电脑,自己前前后后花了半年的时间组装了一台电脑,配置如下: cpu i9700k(对于深度学习来说,这个U已经够了) 主板 华硕z390-A(主要是这款主板支持 ...

  2. 如何配置一台深度学习工作站?

    这篇文章主要介绍的是家用的深度学习工作站,典型的配置有两种,分别是一个 GPU 的机器和四个 GPU的机器.如果需要更多的 GPU 可以考虑配置两台四个 GPU 的机器. 如果希望一台机器同时具备 6 ...

  3. 【深度学习】如何配置一台深度学习工作站?

    极市导读 本文介绍了家用的深度学习工作站的两种典型配置,以及各类硬件的参数介绍和选择方案,可以作为选购时的参考. 这篇文章主要介绍的是家用的深度学习工作站,典型的配置有两种,分别是一个 GPU 的机器 ...

  4. 深度学习多卡配置_组装机(多显卡)配置小贴士/深度学习主机

    618快到了已经开始了,去年这个时候自己组装了一台双显卡的主机,当时自己网上查了很多别人整理的资料有些也有坑.所以整理下先前的经验,网上关于装机步骤,系统安装的资料已经很多了,这里聚焦在配件的选择上. ...

  5. 关于深度学习主机的一些选配问题

    作为一个深度学习的初学者,你可能会遇到这样的问题:"我该如何训练我自己或者别人的Model?""我该如何配置一台合适的主机?""目前有哪几种训练模型的 ...

  6. 深度学习主机环境配置: Ubuntu16.04+GeForce GTX 1080+TensorFlow

    http://f.dataguru.cn/thread-660774-1-1.html 发表于 2016-7-20 09:04 | 只看该作者 |倒序浏览 |阅读模式 深度学习主机环境配置: Ubun ...

  7. 攒一台自己的深度学习主机

    攒一台自己的深度学习主机 本来早就有组一台深度学习主机的打算了,刚好趁着这个星期事情不是很多,就终于把这个事情搞定了. 整个过程分为几个部分,首先是自己根据需求来列出配置单,然后根据配置单去各种渠道比 ...

  8. DIY组装自己的深度学习主机

    其实想写自己的博客很久了,但一直没有动手开始写,今天是2018年6月24日,准备邯郸学步,开启自己的博客园博客之旅. 因为在公司有接触深度学习这一块,然而因为没有一台自己的深度学习主机,不能放开手脚来 ...

  9. 自己配深度学习主机的那些坑

    最近花了8400元装了一台深度学习主机, 主板是二手的技嘉GA-Z77P-3D, CPU是二手的Intel Xeon E3-1230 v2, 显卡技嘉1080ti gaming oc, 内存威刚DDR ...

最新文章

  1. Python基础学习之 函数
  2. 【无私分享:从入门到精通ASP.NET MVC】从0开始,一起搭框架、做项目(7.2) 模块管理,模块的添加、修改、删除...
  3. python库_计算机二级教程 Python语言程序设计,第10章python第三方库概览
  4. 华为mate9云闪付功能_洗尽铅华:盘点华为那些深藏blue的手机
  5. Docker for windows 10
  6. 避免某个子窗体重复运行的方法(showdialog、show)
  7. 玩转oracle 11g(22):ora-01691和修改密码过期时间
  8. 关于Chrome内核88版本无法正常使用Adobe Flash Player公告
  9. Custom Basic Authentication for IIS
  10. linux的vmstat命令,Linux中vmstat命令起什么作用呢?
  11. android 广播 飞行模式,Android 开启飞行模式的几种方式
  12. 地图根据地名批量标注地点 发现好像要么限制了10-20个个数 要么就需要企业付费...
  13. linux内核不识别分区,ubuntu14.04无法识别树莓派SD卡问题
  14. py文件转换成exe格式
  15. 程序员培训班出来之后,有可能向更高的层次爬升么?
  16. 表的列被set unused的机制
  17. 【转载·SCTP协议】浅析 - SCTP协议
  18. 【信息安全】-病毒 VS 木马 VS 蠕虫
  19. 国密Nginx容器实战
  20. 怎么将计算机桌面全部变成英文翻译,怎么在电脑桌面便签上将英文翻译为中文并混合保存为便签内容?具体步骤是什么...

热门文章

  1. 浪潮5280m4导轨安装_NF5280M4 – 导轨安装
  2. 百度 腾讯 阿里 小米 笔试题目宝典
  3. 七:面向对象-->封装(电子宠物系统为例)
  4. 简阅人体姿态估计深度学习方法-simpread-Human Pose Estimation Deep Learning Approach
  5. 机器学习 稀疏性的优点
  6. vue 自适应屏幕的宽高度
  7. tcl脚本vsim命令的参数列表
  8. 解决:JedisNoReachableClusterNodeException: No reachable node in clust
  9. 使用 Grails 开发 Google App Engine 应用
  10. Matlab一维数组及其应用