10.1 分久必合,合久必分 在计算机发明之初,存储是外置的,如打孔纸袋;后来发明了硬盘,硬盘是装到计算机内部的;硬盘用了一段时间,发现容量不够了,于是又有了SAN存储,放到计算机外部;云计算时代的到来,
又产生了HDFS,通过软件聚合普通服务器内部的硬盘,对外提供统一的存储,以及诞生了所谓的ServerSAN,即软件定义存储。10.2 存储硬件的发展 10.2.1 机械硬盘的工作原理 10.2.2 SSD的原理 10.2.3 3DXPoint 10.2.4 硬件发展小结 10.3 存储关键指标 衡量硬件的性能一般有如下4个指标:1.容量2.吞吐量3.IOPS4.响应时间10.4 RAID技术 磁盘阵列(RAID)是指由独立磁盘构成的具有冗余能力的阵列。10.5 存储接口 存储的分类方法有很多种,根据存储所处的位置可分为内置存储和外挂存储。开放系统的外挂存储根据连接方式可以分为直连式存储(DAS)和网络存储(FAS);开放系统的网络化存储根据传输协议
又可以分为网络接入存储(NAS)和存储区域网络(SAN)。从接口看存储,又分为文件,对象,块,k/v 等经典接口。10.5.1 文件接口 10.5.2 裸设备 10.5.3 对象接口 10.5.4 块接口 10.5.5 融合是趋势 10.6 存储加速技术 10.6.1 数据组织技术 1.Cube2.Kylin3.ORCFile4.Parquet5.Google Mesa 数据模型2.索引技术 索引是关系型数据库的重要概念。总的来说,索引就是拿空间换时间。10.6.2 缓存技术

10.大数据架构详解:从数据获取到深度学习 --- 存储是基础相关推荐

  1. 大数据架构详解从数据获取到深度学习读书笔记

    我们将大数据按处理时间的跨度要求可以分为以下几类: 1 基于实时数据流的数据处理(streaming Data processing),通常的是假跨度在数百毫秒到数秒之间 2 基于历史数据的交互式查询 ...

  2. 《大数据架构详解:从数据获取到深度学习》第八次重印

    第八次重印: 个人去年十月份出版的<大数据架构详解:从数据获取到深度学习>卖的还不错,京东,当当,亚马逊一直在热销榜上,一直排在前列,榜首常客! 既上个月重印之后,本月又重印了一次,累计八 ...

  3. 《大数据架构详解》一书第16次重印

    又收到编辑寄的样书,看了下<大数据架构详解:从数据获取到深度学习>一书从16年10月出版以来,第16次重印. 京东评价超过2万条: 作者手上有少量全新样书,有想要签名样书的同学可以加作者微 ...

  4. 大数据架构详解:从数据获取到深度学习.pdf

    大数据架构详解:从数据获取到深度学习.pdf ----------------------------- 作者:朱洁,罗华霖 著 出版社: 电子工业出版社 ISBN:9787121300004 版次: ...

  5. 为什么写《大数据架构详解》这本书

    花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书<大数据架构详解:从数据获取到深度学习>.整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了. 回想这我50 ...

  6. 《大数据架构详解》一书再版意见征集

    <大数据架构详解:从数据获取到深度学习>这本书从2016年10月出版以来,一直在重印,早就超过3万本,在大数据和云计算专业领域里面卖的还可以的,多谢各位读者和朋友们的厚爱.对大数据技术有学 ...

  7. 《大数据架构详解》读后感

    <大数据架构详解> -- 读后感 作者:朱洁 罗华霖 出版商:中国工信出版社 电子工业出版社 版次:2016年10月第1版 印数:7001 ~ 12000册 定价:69.00元 本书花了大 ...

  8. 喜大普奔,《大数据架构详解》一书 登陆 当当,京东热卖榜

    2016-11-27 朱洁 大数据和云计算技术 最近加班太多,"江郎才尽了",这周不想写博客了,休息下. 讲点高兴的事情,我的新书<大数据架构详解>登陆当当,京东热卖榜 ...

  9. 大数据架构详解学习笔记

    读书笔记 书名<大数据结构详解–从数据获取到深度学习>,作者:朱洁 罗华霖 运营商大数据平台架构 数据获取方法 感兴趣章节 6.2.3 Linux 系统调优原理 关于虚拟内存部分新了解的一 ...

  10. 2.大数据架构详解:从数据获取到深度学习 --- 运营商大数据架构

    第2章 运营商大数据架构 2.1 架构驱动的因素 运营商面临着被管道化,营收下滑,大数据项目承担企业战略转型,数据变现的使命.互联网企业的大数据往往是承担业务创新,未来探索的一种驱动因素,所以对于架构 ...

最新文章

  1. 【每日一算法】有效的括号
  2. Exchange 2013sp1邮件系统部署-(七)
  3. 2014年百度之星程序设计大赛 - 初赛(第二轮)Chess
  4. 前端学习笔记之this——懂不懂由你,反正我是懂了
  5. 014_哈希表内建函数
  6. visual studio 不能创建biztalk 项目
  7. iOS UUID配合keychain的替换方案实现
  8. 文件的文本打开方式和二进制打开方式的区别
  9. [译] ASP.NET 生命周期 – ASP.NET 上下文对象(八)
  10. ThreadLocal知识介绍
  11. Kendo UI开发教程:Kendo UI模板概述
  12. html弹出保存文件对话框_初步了解CAD的模板文件
  13. “鱼”和“熊掌”也能兼得——省时省心
  14. recipe terminated with fatal error: spawn xelatex enoent.
  15. 在Android Studio创建第一个Android项目
  16. win7 64位纯净版系统下载
  17. iis6 增加PHP+MYSQL等时,记得 PHP目录要给EVERYONE权限
  18. AutoML系列 | 04-AutoML系统中的元知识迁移应用
  19. 如何添加扩展程序(到chrome
  20. 记录女士出差一周必备物品清单用哪个便签比较好

热门文章

  1. ABAP术语-Update Task
  2. select选择框在谷歌火狐和IE样式的不同
  3. Delphi Invalidate的用法
  4. 两堆草前饿死的驴——选择永远是件痛苦的事
  5. 在这个人人拥抱python的时代,R真的out了吗?
  6. 听说你想做一份高级的可视化图表?
  7. 【R图秀-5】将薪比薪
  8. CSS动画实现滚动播放
  9. matlab练习程序(对应点集配准的四元数法)
  10. python实现汉诺塔(递归)