IDC曾发出预测,预计到2025年,全球数据量将达到175ZB,当数据量加速增长,当企业对数据价值挖掘的需求越来越高,人们对于存储和计算效率也提出了更高要求,当有越来越多的数据无法被利用,越来越多的技术专家开始将问题归咎于经典冯诺依曼架构的局限性。

如何突破冯诺依曼架构的局限性,业内有许多思考和尝试,其中以英特尔®傲腾™持久内存的做法最具代表性。

傲腾观察室:请回答2021

在11月18日,百易传媒(DOIT)举办的一场名为“傲腾观察室”的在线直播活动中,作为数据存储产业的资深观察者,DOIT总编宋家雨在与业内多位技术专家沟通中得到一个结论。

宋家雨表示,目前,应对冯诺依曼架构局限性问题,业内出现了两类解决方案:一类是存算一体化架构,它让存储具备计算的能力,从而解决数据反复搬迁导致的效率低下问题。一类是改良性的方案,把内存做得更大,把更多数据放到靠近核心的地方,从而解决数据搬迁的问题。

从目前来看,存算一体化方案在成熟度上还需要更多验证,而依赖于新型存储介质打造的傲腾持久内存方案,可以以更低的成本提供更大的内存空间,缓解内存不足的问题。而且,由于对架构的变化相对较小,所以,这是目前市场上接受度更高,成熟度更高的实践方案。

站在2021年来看英特尔®傲腾™,与几年前英特尔®傲腾™刚推向市场时已有很大不同,彼时,都在谈论傲腾是什么。而现在,人们对于傲腾持久内存的讨论已变为实际应用场景的实践分析,谈论傲腾如何提高效率、降低成本,帮助企业塑造竞争力。

英特尔®傲腾™持久内存有两种使用模式,一种是内存模式,它将DRAM作为其高速缓存使用,两者结合构成大的内存资源池,从而以较低的成本提供较大内存容量,在许多场景中有不逊色于原来纯DRAM内存方案的表现。

英特尔®傲腾™持久内存技术的另外一种模式叫做App Direct,它对于操作系统和应用程序都提出了一定要求,用户想使用这种模式需要应用层面上做出一些调整,这大大提升了用户的使用门槛和使用难度。

为了破解这一难题,业内一些创新企业进行了许多探索和实践。

基于英特尔®傲腾™的大内存技术:将内存和外存合二为一

MemVerge是一家大内存技术方案的代表性企业,它基于英特尔®傲腾™持久内存技术开发了一套软件技术架构,MemVerge可以帮助用户屏蔽傲腾持久内存技术本身的复杂度,让用户能更轻松地用上傲腾持久内存,获得更大的内存空间。

MemVerge的创始人兼CEO范承工是数据存储领域的传奇人物,他曾是EMC中国卓越研发集团创始人、VMware中国研发中心创始人,他还是著名分布式存储VMware vSAN的带头人,他对于数据存储架构本身有深入的实践经验,而他所开创的大内存技术正在成为新的技术潮流。

范承工在直播中介绍称,在以前,计算架构的瓶颈往往在于计算和网络,而当数据越来越多,如何快速高效处理,其瓶颈转变为存储部分,在于存储和内存,大内存技术的出现就是为了解决计算架构中的存储瓶颈。

理想的计算架构中,需要参与计算的数据都存放在内存中,这里所说的内存既包括L1、L2、L3缓存,也包括DRAM,系统访问内存数据时几乎可以不用等待。然而,能存在内存里的数据是非常有限的,DRAM相对于L3、L2、L3缓存要大的多,但仍有许多数据不能放在内存里。

于是,剩下的数据就只能放在外部存储里,外部存储包括常见的磁盘、SSD等外部存储设备和外部存储系统等,当系统需要访问外存上的数据时,需要把数据搬迁到内存里,这需要明显的等候时间,当数据量越来越大时,等候时间也越来越长,这种现象就叫做IO墙。

大内存技术的做法是将内存和外存合二为一,将两者组合成大内存,既利用了内存的高性能优势,又利用了外存的非易失性(掉电不丢数据),从而省去了数据在外存和内存之间的搬迁时间,从而消除IO墙,消除存储瓶颈。

2019年,英特尔推出了傲腾持久内存,它可以作为大内存的核心硬件,作为业内第一款商用的SCM(Storage Class Memory,存储级内存)解决方案,它比传统DRAM内存的容量更大,同时兼具非易失性,性能接近于传统内存,这使得大内存方案的落地成为可能。

基于英特尔®傲腾™的大内存技术:落地与应用

MemVerge的大内存软件可以将不同的内存硬件虚拟为一个大的内存池,在应用看来,大内存软件构建的内存池与原来的DRAM没有任何区别,应用无需做出任何改变即可使用大内存池。另外,大内存软件还提供了各种常见的数据服务,比如快照、复制以及安全功能。

宋家雨认为,MemVerge大内存软件的设计非常巧妙,它构建了一个傲腾内存与应用软件之间的中间层,屏蔽了背后复杂的技术实现,让实际环境中许多旧有的成熟的应用软件无需做任何修改即可利用以英特尔®傲腾™构建的大内存方案,这为大内存技术的普及打下了良好基础。

在将MemVerge大内存软件推向市场的一年多时间以来,已经在包括金融行业,高性能计算,以及云服务等领域得到了许多应用,而且,许多场景的具体用法都有所不同。

金融行业中,一些银行和交易市场将大内存技术用于内存数据库,不仅提供了更大容量的内存,同时还利用了快照技术,从而能在宕机时快速重启并恢复业务服务,比起传统方式的速度快了约1500倍,极大提升了系统的容错性和服务的连续性。

在高性能计算领域,特别是在涉及生物基因计算场景中,大内存技术可以帮助生物信息科学家更高效地进行基因分析,能将获取结果的速度提高30%-60%,这无论是对于新冠病毒的研究,还是对于癌症治疗的研究,诸多生物基因相关研究工作都大有裨益。

云服务商利用大内存技术提高单台设备的内存容量,从而提高单台设备的虚拟机密度,用一样的硬件提供更多虚拟机服务,这意味着单个虚拟机成本的降低,也意味着竞争力的提升。

新技术新趋势,傲腾持久内存将扮演更重要角色

以英特尔®傲腾™打造的大内存技术要打破IO墙,突破存储瓶颈,解决真实的用户痛点,拥有令人向往应用前景,但以傲腾为代表的SCM要做的事情还远不止于此,我们也看到,一场技术架构变革正在数据中心里有序进行。

2019年,英特尔牵头成立了名为CXL(Compute Exspanss Link)标准组织,以实现CPU与GPU、FPGA等各种专用加速件的高速互联,对于突破存储瓶颈也意义重大。

对于存储来说,CXL是一种新的内存接口,与原来的DDR相比,CXL具有更高的可扩展性,更高的带宽。CXL支持包括英特尔®傲腾™以及SSD等各种存储方案,它的架构设计不局限于单个系统,而且可以在多机之间进行连接,可以实现多机之间的共享。

范承工表示,CXL是一个改变游戏规则的新技术,它可以实现内存和计算的相对独立,可以实现多机之间的内存池化共享,可以实现真正的可组合基础设施,可以动态地为系统添加计算、内存、存储资源。

这意味着,CXL将有助于实现计算、存储和网络资源的机架级解耦,将改变未来的数据中心计算架构形态,一个大的内存池将出现,而傲腾持久内存在未来数据中心架构中也将扮演更重要的角色。

下方扫码观看完整节目

欢迎进入【傲腾观察室】

内存外存合二为一,解密基于英特尔®傲腾™的大内存技术!相关推荐

  1. 【观察】突破内存与存储瓶颈,英特尔傲腾从蓄势到爆发

    申耀的科技观察 读懂科技,赢取未来! 毫无疑问,如今的世界正以加速度进入到智能化时代,其中"物理世界数字化.数字世界智能化"就是最为重要的特征体现. 而当越来越多的物和设备都像一台 ...

  2. 英特尔傲腾,给内存和存储间加点“料”

    你在刷电子产品的时候,想过这些数据是如何存储和处理的吗?在数字时代,存储的核心离不开内存.优质的内存能够提高存储速度和稳定性,让我们享受数字时代的红利.内存是如何运转的,它在存储的世界中是何种地位?本 ...

  3. 英特尔® 傲腾™(Optane™)技术

    英特尔® 傲腾™(Optane™)是一种革命性的存储技术,具有突破性的IO性能.可预测的快速服务响应.超高寿命和超低延时等特性,可帮助消除数据中心存储瓶颈,并允许使用更大型.更经济实惠的数据集,以从大 ...

  4. 腾讯云发布全新非关系型数据库KeeWiDB 搭载基于英特尔傲腾技术的全自研存储引擎

    5月16日,腾讯云发布全新非关系型数据库KeeWiDB,搭载全自研存储引擎.这是腾讯云发布的首款软硬件结合.高速低延迟的NoSQL数据库产品. KeeWiDB创新性地实现三级存储架构设计,自研代码量超 ...

  5. 英特尔®傲腾™持久内存+MemVerge软硬结合发挥极致性能

    IDC曾发出预测,预计到2025年,全球数据量将达到175ZB,当数据量加速增长,当企业对数据价值挖掘的需求越来越高,人们对于存储和计算效率也提出了更高要求,当有越来越多的数据无法被利用,越来越多的技 ...

  6. 联想宣布推出升级版数据中心产品组合——搭载全新英特尔(R)处理器和持久性内存且安全性增强

    15款联想ThinkSystem服务器和5款ThinkAgile设备现由第二代英特尔®至强® (Intel® Xeon®)可扩展处理器提供支持 联想解决方案还采用创新的英特尔®傲腾™ (Optane™ ...

  7. 大盘点:英特尔®傲腾™突破存储瓶颈的十大价值点

    英特尔®傲腾™是市场上最常见的存储级内存解决方案,作为近年来基础架构上最具突破性的方案,傲腾在越来越多的实际应用场景中释放出了亮眼价值,今天我们就快速盘点一些英特尔®傲腾™的一些个令人眼前一亮的点,供 ...

  8. 云平台结合英特尔®傲腾™技术发挥更强效能!

    在如今的IT技术市场上,有这样一类技术创新势力,它们有很多数据中心基础设施资源,它们有大量在线业务,有的做电商,有的做游戏,有的做视频网站,还有的做搜索引擎,它们有一个共同点,就是有很强的技术储备,强 ...

  9. 从创新到主流选择,英特尔傲腾为用户输出了更多价值

    申耀的科技观察 读懂科技,赢取未来! 自2020年10月英特尔宣布出售NAND业务产品线之后,我最大的感触就是,英特尔可以更专注在傲腾业务方面了.时隔半年之后,英特尔是如何聚焦傲腾业务线的呢?市场上的 ...

最新文章

  1. NIO详解(九):Selector详解
  2. nagios 监控 mysql 读写比 R/W
  3. Merge Two Sorted Lists leetcode java
  4. linux 内核 第二周 操作系统是如何工作的
  5. cesium 3dtiles 加载本地数据_深入echarts学习:加载跨域、异步、本地json数据的防坑录
  6. android sqlite联合,在联合查询中,Android SQLiteorder by 计算列_sql_开发99编程知识库...
  7. DBC文件编写概述 及 CANoe 使用DBC分析信号
  8. echarts饼图选中一块_echarts圆饼图设置默认选中项并在中间显示文字
  9. 项目结构优化设计之smv架构
  10. android通知栏的点击事件,android自定义通知栏以及点击事件
  11. 大数据培训ClickHouse表引擎
  12. 【分布式系统】分布式事务(2PC 3PC TCC 最终一致性)
  13. 鸿蒙os2.0第一批升级名单,首批升级鸿蒙OS名单终于来了!
  14. 外贸网站最好用的5大WordPress插件【必须安装】
  15. mac请在微信客户端连接服务器,微信官方Mac版客户端,这次是真的。
  16. ubuntu、win跨平台局域网文件传输工具
  17. 吹响集结的号角:O'Reilly和Intel人工智能大会北京站在召唤!
  18. 为什么相同资源 IDM 感觉比迅雷快好多?
  19. 轻量级音乐播放器 android,5款顶级Android离线音乐播放器,哪款才是你的菜?
  20. 让开发头疼的“验证码”有什么用?

热门文章

  1. 建筑企业也想享受15%优惠税率?你需要掌握4大指标2个关键
  2. 区块链竞技游戏“霹雳熊猫”上线
  3. PTA--递归:7-1 斐波那契数列(I)
  4. .Net 日志系统-常用日志框架
  5. NSQ简介及连接模式
  6. 入坑 国货xavier NX开发板套件 替代方案--英伟达官方xavier nx套件 与 leetop SUB KIT xavier nx套件
  7. 计算机移动存储设备是,移动存储设备使用时的注意事项有哪些?
  8. 移动电源怎么选好?最好的移动电源推荐
  9. Ubuntu环境搭建PPTP服务器
  10. centos环境搭建pptp服务器