开源大数据：Alluxio 云原生数据编排

Alluxio 官网

1、Alluxio概述

Alluxio的前身为Tachyon，

Alluxio是一个基于内存的分布式文件系统，它是架构在底层分布式文件系统和上层分布式计算框架之间的一个中间件，主要职责是以文件形式在内存或其它存储设施中提供数据的存取服务。

2、Alluxio 架构

HDFS、HBase、Spark等大数据相关框架一致，与HDFS、HBase、Spark等大数据相关框架一致，

3、Alluxio 应用

Alluxio居于传统大数据存储（如：Amazon S3，Apache HDFS和OpenStack Swift等）和大数据计算框架（如Spark，Hadoop Mapreduce）之间，如下图所示

4、Alluxio 部署

4-1、管理数据副本/应用程序部署到云上计算能力，

4-1、跨地理分布的数据中心扩展计算能力

开源大数据：Alluxio 云原生数据编排相关推荐

听说，难于上青天的云原生数据湖能开箱即用了？
导语 | 云原生数据湖架构以低成本优势推动客户上云,同时云上客户得以低成本撬动更多结构化和非结构化数据的价值,是一场云厂商的自我革命.本文由腾讯大数据专家工程师于华丽在 Techo TVP开发者峰会「 ...
快速上手 Rook，入门云原生存储编排
Rook 是一个开源 cloud-native storage orchestrator(云原生存储编排器),为各种存储解决方案提供平台.框架和支持,以与云原生环境进行原生集成. Rook 将存储软件 ...
云原生数据编排厂商Alluxio获5000万美元C轮融资
全球首创的开源云原生数据编排软件开发商Alluxio宣布完成5000万美元C轮融资,该轮融资由新投资方高瓴创投领投,战略投资方和原股东a16z.Seven Seas Partners.火山石投资跟投. ...
如何加速云原生数据应用？这个开源项目备受关注
2021 年 9 月 17 日,在由中国信息通信研究院.中国通信标准化协会联合主办的"2021 OSCAR 开源产业大会"上,由阿里云云原生团队联合发起(其他联合单位包括:南京大学 ...
Fluid + GooseFS 助力云原生数据编排与加速快速落地
前言 Fluid 作为基于 Kubernetes 开发的面向云原生存算分离场景下的数据调度和编排加速框架,已于近期完成了 v0.6.0 版本的正式发布.腾讯云容器 TKE 团队一直致力于参与 Flui ...
数字营销行业大数据平台云原生升级实战
简介: 加和科技CTO 王可攀:技术是为业务价值而服务王可攀加和科技CTO 本文将基于加和科技大数据平台升级过程中面临的问题和挑战.如何调整数据平台架构以及调整后的变化,为大家介绍数字营销行业大数 ...
云原生数据湖分析DLA 2020年年度总结
简介:主要讲述阿里云数据湖分析DLA 2020年的进展~ 一.概述 2020年黑天鹅事件不断出现,疫情给人们的生活也带来了改变.在后疫情时代,伴随着云原生技术的发展,企业寻求更加敏捷.更加灵活的数据分 ...
云原生数据中台的 What、Why、Who、How和Where
作者 | 地雷责编 | 欧阳姝黎 WHAT:云原生是什么? 它有啥前世今生? 简单说,云原生(Cloud Native)是在云上构建和运行系统的方法论.最早移植上云的"非原住 ...
云原生数据湖以存储、计算、数据管理等能力通过信通院评测认证
又一项大能力-云原生数据湖获得信通院认证啦! 近日,中国信息通信研究院 (以下简称"信通院") 正式公布了第十四批"大数据产品能力评测"结果,腾讯云云原生数据湖 ...