Hadoop社区正式支持腾讯云COS,全球大数据开发者将无缝使用中国云存储
8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持。后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量数据的读写任务。
大数据分析需要花费大量的计算和存储资源。在传统模式下,计算与存储资源耦合度较高,一旦资源不够,就需要对二者同时进行扩容。近年来,在云计算的推动下,开发者逐渐开始采用云上对象存储,来实现计算与存储的分离,进而提升资源的灵活性,并降低成本。
Hadoop是目前应用最为广泛的分布式大数据处理框架,也是大数据处理领域事实上的标准。在数据价值越来越被重视的时代,Hadoop也在互联网、政务、金融等行业中被广泛使用。
腾讯云对象存储COS是一种云端分布式存储服务,其底层采用腾讯自研存储引擎YottaStore,能够实现单集群理论管理百万级节点,并且做到按需扩容,磁盘利用率达到 90% 以上。
Hadoop社区支持腾讯云对象存储以后,开发者在基于Hadoop架构进行大数据分析时,能够无缝使用到腾讯云对象存储COS提供的高速云存储服务。
“开发者在腾讯云上可以使用弹性 MapReduce(EMR)计算,并直接使用腾讯云对象存储COS作为后端存储,整个过程都不需要额外添加代码,更加方便和快捷。”腾讯云对象存储负责人介绍。
目前,小红书、猎豹移动、珍爱网等就使用了腾讯云“EMR on COS”的计算与存储分离模式,快速构建和部署大数据分析程序,有效地满足了大数据业务需求。
Hadoop社区正式支持腾讯云COS,全球大数据开发者将无缝使用中国云存储相关推荐
- “云原生”、“大数据”、“云计算”的结合——阿里云的云原生大数据计算服务MaxCompute
前言:在讨论"云原生大数据计算服务"之前,我们先将这个名词进行拆分,分别讨论一下"云原生"."大数据"."计算服务",从 ...
- 基于hadoop构建对象存储系统_Hadoop社区正式支持腾讯云对象存储COS
8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持.后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量 ...
- 油烟在线监控系统云平台 油烟环保监测云平台 油烟大数据平台
摘要:餐饮业油烟是大气中挥发性有机物(VOCS)和 PM10 的主要来源之一.近年来随着环保治理的加强,中央.省市区不断强化餐饮经营商全覆盖安装油烟净化器工作,但在监管上仍存在一些问题和漏洞. (1) ...
- 非官方即时通信 IM,支持腾讯IM,环信IM,极光IM,融云IM,网易云信IM等
非官方即时通信SDK easy-im 非官方即时通信SDK,支持腾讯IM,环信IM,极光IM,融云IM,网易云信IM等 安装 composer require openphp/easy-im 请求日志 ...
- 昨日黄花Hadoop 方兴未艾云原生——传统大数据平台的云原生化改造
本文6539字,阅读时间约20分钟 以Hadoop为中心的大数据生态系统从2006年开源以来,一直是大部分公司构建大数据平台的选择,但这种传统选择随着人们深入地使用,出现越来越多的问题,比如:数据开发 ...
- 【华为云技术分享】大数据容器化成趋势,华为云BigData Pro一马当先
大数据的需求热度,从来都是这个时代的浪尖.然而由于大数据系统的复杂性,一度导致业界大数据已死的各种声音不断.尤其是当MapR被HPE收购,Cloudera公司股票持续跌成狗,使得这种声音进一步放大. ...
- 云原生与大数据、AIoT、开源的碰撞之路——专访小米崔宝秋
谈及当下技术领域的热词,必定有云原生.大数据.AIoT,不仅因为这些新兴技术拥有前所未有的创造力,更是因其中每一项技术都代表诸多未知的可能.而当这些技术相互碰撞时,将为软件发展.技术进步.城市升级带 ...
- 专访小米崔宝秋:云原生与大数据、AIoT、开源的碰撞之路
谈及当下技术领域的热词,必定有云原生.大数据.AIoT,不仅因为这些新兴技术拥有前所未有的创造力,更是因其中每一项技术都代表诸多未知的可能.而当这些技术相互碰撞时,将为软件发展.技术进步.城市升级带来 ...
- 中望软件华东区技术部经理尚飞:中望设计云与制造大数据解决方案
为进一步推广上海市国企应用自主可控信息技术,9月26日,由上海市国有资产管理委员会.上海市经济和信息化委员会.上海市版权局指导,上海市国有资产信息中心主办,畅享网提供媒体支持的"自主可控技术 ...
最新文章
- Java爬虫技术(二)爬取京东iPhone商品信息并生成Json日志
- Android:日常学习笔记(6)——探究活动(3)
- Log4net数据表
- bootstrap文件不能被识别_如何使用npm安装bootstrap
- html怎么设计自动出现提示的数据列表?怎么设计数据列表像百度一样怎么随用户输入而更新
- 第二节:简易安装 和 快速入门Vue.js
- Android 获取信号强度
- Tomcat学习总结(17)—— Tomcat生产环境中域名访问和连接MySQL
- Linux系统下安装Mysql
- Linux下MongoDB服务安装
- 使用 Pandas 与 Matplotlib 分析科比职业生涯数据-CSDN公开课-专题视频课程
- WPS表格常用快捷键大全
- 交换机生成树相关实验
- [经验] 我想加入阿里,我该怎么做
- 背阔肌(06):T杠俯身划船
- UNIX环境高级编程源码
- 【转】8核、6核、4核、双核CPU是什么意思
- 项目1:德州扑克游戏
- html5 电子白板 直播,HTML5 canvas 做画板画图 可以做电子白板
- 【数学建模】基于SIR模型实现新冠病毒COVID-19估计附matlab代码