大数据新时代依然需要古老的磁带存储技术
现在是一个数据指数增长的时代,根据IDC数据预测,2025年全世界将产生175ZB的数据。未来5年的产生数据,将是过去所有产生数据的2倍以上。
这里面大部分数据是不需要存储的,在2025预计每年需要存储11ZB的数据。换算个容易理解的说法,1ZB是10^18Bytes, 相当于要写5556万块容量18TB的硬盘。
这些存储的数据中,仅10%认为是Hot频繁访问的数据,90%的数据都将是Warm/Cold温冷数据, 也就是不经常访问的数据。举个简单的例子,我们目前每人至少1部智能手机,里面存储大量的照片、视频、聊天记录等个人隐私数据,这些数据自产生后,我们开始可能会经常访问,在3个月以后,你还会对着数据有访问的诉求吗?这个概率基本会下降到1%以下。
从概率统计学来讲,超过3个月(90天)不再访问的数据,我们都可以称为冷数据,归档数据。每年全世界有25-35%的新增归档冷数据需要存储。这个市场的需求是非常的庞大。
目前归档冷数据的最终归属大多数是基于HDD,SMR,磁带Tape等介质的冷存储系统。冷存储系统的最大的优点就是成本低和数据保留时间长,但是也带来相应的缺点就是冷归档数据读取过程需要“解冻”,数据访问响应时间拉长。
从上图存储介质的出货量和类型数据,我们也可以看到,在2025年,机械硬盘包括SMR新型机械盘存储介质的占比仍然有50%。我们本文重点需要关注的是Tape磁带,如下图棕色框,每年的出货量也在不断增长。从20世纪30年代开始算的话,磁带技术也算是一位接近期颐百岁老人了,磁带技术虽然古老,但凭借独特的魅力依然挑起了世界数据存储的重担。
磁带的分类,这部分我们直接参考百度百科的简单介绍吧,大家有个感性的认识,不是本系列专题的重点。
(1)DLT/SDLT, Digital Linear Tape/Super Digital Linear Tape.
(2)DAT, Digital Audio Tape
(3)LTO, Linear Tape-Open
词条里看到LTO是HP,IBM,Seagate联合研发,其实也不算完全准确。这里补充个小插曲,大约在2000年的时候,有一个叫做Certance的公司,是从希捷磁带部门独立出去。后来在2004年,被一家叫做昆腾Quantum的公司以6000万美元的价格完全收购了,所以,我们目前看到LTO技术介绍内容时,一般说LTO是由HP、IBM、Quantum三家公司联合研发。大家后面看到这个LTO技术联合研发厂商名单的差异,不要疑惑就好。
(4)AIT, Advanced Intelligent Tape
大数据新时代依然需要古老的磁带存储技术相关推荐
- 贵州开启大数据新时代
日前,贵州在京举办2016云上贵州·大数据招商引智推介会暨贵州大数据发展成果展,集中展示了贵阳大数据综合创新试验区建设.云上贵州系统开发.围绕大数据的创业创新等方面取得的成果.现场集中签约产业类.人才 ...
- 数据为王,聚数学院引领大数据新时代
中国互联网自1994年接入国际网后,经历过三次大浪潮,第一次是PC互联网时代,这时产生了新浪.搜狐.网易这样的门户网站.第二个是移动互联网的时代,手机成为连接的起点.第三个是物联网的时代,这是一个充满 ...
- 福利 | 大数据新媒体平台面向清华校内师生开放!
随着互联网.云计算.传感器.社交群落的发展,"大数据时代"以其4个V(Volume.Velocity.Variety.Value)的特征扑面而来,不断影响和改变着世界," ...
- 一文看懂 BDTC 2018:探秘大数据新应用(附 PPT 下载)
12 月 8 日,北京新云南皇冠假日酒店,由中国计算机学会主办,CCF 大数据专家委员会承办,CSDN.中科天玑数据科技股份有限公司协办的 2018 中国大数据技术大会(BDTC)圆满落下帷幕. 从 ...
- 深度探秘大数据新应用,2018 中国大数据技术大会(BDTC)强势来袭!
2018 年12 月 6 -8日,由中国计算机学会主办,CCF大数据专家委员会承办,CSDN.中科天玑数据科技股份有限公司协办的2018 中国大数据技术大会(BDTC),在北京新云南皇冠假日酒店隆重召 ...
- 大数据信息时代,如何防止数据泄露,大数据防泄漏解决方案
随着大数据时代的到来,数据已经成为与物质资产和人力资本同样重要的基础生产要素,大数据正在重塑世界新格局. 伴随着互联网时代频繁上演的数据泄露事件,不仅给企业及个人带来了一定的危机,同时也对国家造成了一 ...
- 一文看懂BDTC 2018:探秘大数据新应用(附PPT下载)
戳蓝字"CSDN云计算"关注我们哦! 12 月 8 日,北京新云南皇冠假日酒店,由中国计算机学会主办,CCF 大数据专家委员会承办,CSDN.中科天玑数据科技股份有限公司协办的 2 ...
- 医疗保健研究报告-生物大数据的时代(附下载)
医药行业的大数据时代即将到来,未来十年,将会逐渐对行业内产业链各个环节产生深远影响. "大数据"这一名词 2012 年在奥巴马国情咨文中被重点提及,从此为大众所知,近几年来发展迅猛 ...
- 大数据人工智能时代你跟上步伐了吗?(号称第四次技术革命)
大数据人工智能时代 1.世界四次工业革命 讲到大数据人工智能不得不提起世界著名改变时代的工业革命.大数据人工智能是继蒸汽机,电力,信息互联网后的第四次技术革命.著名的工业革命详情如下: 第一次革命:1 ...
最新文章
- 如何正确排序整数数组
- java变量数据类型_Java——变量和数据类型
- Gym 101128 B Black Vienna
- [再寄小读者之数学篇](2014-06-22 求导数 [中国科学技术大学2014年高等数学B考研试题])...
- 【算法】我面了N+算法岗候选人,这样的给了SSP
- wed6699整站程序下载【首发】
- 第十四节(接口(行为))
- 电信充q币短信怎么发_移动、联通、电信话费快来领!微信小额提现免手续费方法!刚需羊毛!...
- GB28181平台,监控接入从理论到实现
- linux之添加python环境变量
- 【物理应用】基于matlab GUI功率谱估计【含Matlab源码 329期】
- 快速开发jQuery插件的10大技巧(转)
- 2022年湖北省中小企业公共服务平台认定指南(各地配套奖补政策及申报条件)
- JAVA项目开发团队分配
- Anaconda下载源设置及还原默认
- java litjson_.NET平台开源JSON库LitJSON的使用方法
- c# Socket Udp通讯示例源码
- flashpaper
- 2022-2028年中国仿制药产业深度调研及投资前瞻分析报告
- 路由 OSPF简介、OSPF与其它路由的区别、OSPF区域概念、OSPF路由代名词IR、BR、ABR、ASBR概念简介。
热门文章
- 基于深度神经网络的高光谱影响分类方法研究---MNF+自动编码器+Softmax (准确率比较低,17年的论文)
- [系统安全] 三十五.Procmon工具基本用法及文件进程、注册表查看
- web-log-parser 安装记录
- 推荐系统--基于图的推荐算法
- 阿尔法编程python答案_C语言程序设计-阿尔法编程(编程答案)
- 酷狗音乐9.2.0_酷狗音乐安卓版 v9.2.0下载 - 艾薇下载站
- 碎片化学习三款必备APP
- javascript的基础-1
- WinSock网络编程基础(1)
- 台灣人如何在大陸工作