google三驾马车

三驾马车已经是上个时代的东西了，谷歌三驾马车都已经各自完成了升级。

1.GFS的升级是Colossus https://cloud.google.com/files/s ... _and_challenges.pdf

2. mapreduce升级版谷歌还没有公开

3.Bigtable的升级是Spanner https://ai.google/research/pubs/pub39966

此外，个人在谷歌工作了两年，最惊叹的系统是 Dremel： https://ai.google/research/pubs/pub36632

大数据日知录架构与算法

remel和f1的设计目标不一样的不会互相替代的
BigQuery只是一个marketing的name而已底层还是Dremel

f1分为f1 db和f1 query，后者是一个federated engine，是可以直接从dremel数据源读数据的

关于这方面可以参考f1的新论文：http://www.vldb.org/pvldb/vol11/p1835-samwel.pdf

以及一些解读例如：https://zhuanlan.zhihu.com/p/53299556

google三驾马车相关推荐

一文带你系统梳理Google三驾马车
一文带你系统梳理Google三驾马车不知道大家在工作中,有没有遇到过这类程序员:他们无论在什么岗位,开发什么系统,好像都能够抓到问题的本质,做得「游刃有余」. 我也经常碰到这类程序员,每次我向他们请 ...
[MapReduce] Google三驾马车：GFS、MapReduce和Bigtable
声明:此文转载自博客开发团队的博客,尊重原创工作.该文适合学分布式系统之前,作为背景介绍来读. 谈到分布式系统,就不得不提Google的三驾马车:Google FS[1],MapReduce[2],B ...
Google三驾马车之GFS
谷歌在2003到2006年间发表了三篇论文,<MapReduce: Simplified Data Processing on Large Clusters>,<Bigtable: ...
Google三驾马车之Bigtable
谷歌在2003到2006年间发表了三篇论文,<MapReduce: Simplified Data Processing on Large Clusters>,<Bigtable: ...
Google三驾马车之MapReduce
谷歌在2003到2006年间发表了三篇论文,<MapReduce: Simplified Data Processing on Large Clusters>,<Bigtable: ...
Google三驾马车：GFS、MapReduce和Bigtable
谈到分布式系统,就不得不提Google的三驾马车:Google fs[1],Mapreduce[2],Bigtable[3]. 虽然Google没有公布这三个产品的源码,但是他发布了这三个产品的详细设 ...
Google三驾马车论文原文
Google File System中文版英文版 https://static.googleusercontent.com/media/research.google.com/zh-CN//arch ...
【Google三驾马车系列】GFS原理总结
这里写自定义目录标题 GFS基本框架容错机制 Master 的容错机制 :操作日志 + Checkpoint + ShadowMaster ChunkServer的容错机制:复制多个副本 + che ...
【Google三驾马车系列】MapReduce原理总结
MapReduce基本框架 MapReduce计算模型的两个重要阶段: Map:映射,将数据转化为键值对的形式.切片操作在集群中并发执行,切片大小默认取最大切片.最小切片.块大小(128M)中间值. ...

google三驾马车

google三驾马车相关推荐

最新文章

热门文章