8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持。后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量数据的读写任务。

大数据分析需要花费大量的计算和存储资源。在传统模式下,计算与存储资源耦合度较高,一旦资源不够,就需要对二者同时进行扩容。近年来,在云计算的推动下,开发者逐渐开始采用云上对象存储,来实现计算与存储的分离,进而提升资源的灵活性,并降低成本。

Hadoop是目前应用最为广泛的分布式大数据处理框架,也是大数据处理领域事实上的标准。在数据价值越来越被重视的时代,Hadoop也在互联网、政务、金融等行业中被广泛使用。

腾讯云对象存储COS是一种云端分布式存储服务,其底层采用腾讯自研存储引擎YottaStore,能够实现单集群理论管理百万级节点,并且做到按需扩容,磁盘利用率达到 90% 以上。

Hadoop社区支持腾讯云对象存储以后,开发者在基于Hadoop架构进行大数据分析时,能够无缝使用到腾讯云对象存储COS提供的高速云存储服务。

“开发者在腾讯云上可以使用弹性 MapReduce(EMR)计算,并直接使用腾讯云对象存储COS作为后端存储,整个过程都不需要额外添加代码,更加方便和快捷。”腾讯云对象存储负责人介绍。

目前,小红书、猎豹移动、珍爱网等就使用了腾讯云“EMR on COS”的计算与存储分离模式,快速构建和部署大数据分析程序,有效地满足了大数据业务需求。

Hadoop社区正式支持腾讯云COS,全球大数据开发者将无缝使用中国云存储相关推荐

  1. “云原生”、“大数据”、“云计算”的结合——阿里云的云原生大数据计算服务MaxCompute

    前言:在讨论"云原生大数据计算服务"之前,我们先将这个名词进行拆分,分别讨论一下"云原生"."大数据"."计算服务",从 ...

  2. 基于hadoop构建对象存储系统_Hadoop社区正式支持腾讯云对象存储COS

    8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持.后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量 ...

  3. 油烟在线监控系统云平台 油烟环保监测云平台 油烟大数据平台

    摘要:餐饮业油烟是大气中挥发性有机物(VOCS)和 PM10 的主要来源之一.近年来随着环保治理的加强,中央.省市区不断强化餐饮经营商全覆盖安装油烟净化器工作,但在监管上仍存在一些问题和漏洞. (1) ...

  4. 非官方即时通信 IM,支持腾讯IM,环信IM,极光IM,融云IM,网易云信IM等

    非官方即时通信SDK easy-im 非官方即时通信SDK,支持腾讯IM,环信IM,极光IM,融云IM,网易云信IM等 安装 composer require openphp/easy-im 请求日志 ...

  5. 昨日黄花Hadoop 方兴未艾云原生——传统大数据平台的云原生化改造

    本文6539字,阅读时间约20分钟 以Hadoop为中心的大数据生态系统从2006年开源以来,一直是大部分公司构建大数据平台的选择,但这种传统选择随着人们深入地使用,出现越来越多的问题,比如:数据开发 ...

  6. 【华为云技术分享】大数据容器化成趋势,华为云BigData Pro一马当先

    大数据的需求热度,从来都是这个时代的浪尖.然而由于大数据系统的复杂性,一度导致业界大数据已死的各种声音不断.尤其是当MapR被HPE收购,Cloudera公司股票持续跌成狗,使得这种声音进一步放大. ...

  7. 云原生与大数据、AIoT、开源的碰撞之路——专访小米崔宝秋

    ​谈及当下技术领域的热词,必定有云原生.大数据.AIoT,不仅因为这些新兴技术拥有前所未有的创造力,更是因其中每一项技术都代表诸多未知的可能.而当这些技术相互碰撞时,将为软件发展.技术进步.城市升级带 ...

  8. 专访小米崔宝秋:云原生与大数据、AIoT、开源的碰撞之路

    谈及当下技术领域的热词,必定有云原生.大数据.AIoT,不仅因为这些新兴技术拥有前所未有的创造力,更是因其中每一项技术都代表诸多未知的可能.而当这些技术相互碰撞时,将为软件发展.技术进步.城市升级带来 ...

  9. 中望软件华东区技术部经理尚飞:中望设计云与制造大数据解决方案

    为进一步推广上海市国企应用自主可控信息技术,9月26日,由上海市国有资产管理委员会.上海市经济和信息化委员会.上海市版权局指导,上海市国有资产信息中心主办,畅享网提供媒体支持的"自主可控技术 ...

最新文章

  1. Java爬虫技术(二)爬取京东iPhone商品信息并生成Json日志
  2. Android:日常学习笔记(6)——探究活动(3)
  3. Log4net数据表
  4. bootstrap文件不能被识别_如何使用npm安装bootstrap
  5. html怎么设计自动出现提示的数据列表?怎么设计数据列表像百度一样怎么随用户输入而更新
  6. 第二节:简易安装 和 快速入门Vue.js
  7. Android 获取信号强度
  8. Tomcat学习总结(17)—— Tomcat生产环境中域名访问和连接MySQL
  9. Linux系统下安装Mysql
  10. Linux下MongoDB服务安装
  11. 使用 Pandas 与 Matplotlib 分析科比职业生涯数据-CSDN公开课-专题视频课程
  12. WPS表格常用快捷键大全
  13. 交换机生成树相关实验
  14. [经验] 我想加入阿里,我该怎么做
  15. 背阔肌(06):T杠俯身划船
  16. UNIX环境高级编程源码
  17. 【转】8核、6核、4核、双核CPU是什么意思
  18. 项目1:德州扑克游戏
  19. html5 电子白板 直播,HTML5 canvas 做画板画图 可以做电子白板
  20. 【数学建模】基于SIR模型实现新冠病毒COVID-19估计附matlab代码

热门文章

  1. Java求三个数中的最大值
  2. 梯度提升树(GBDT)原理小结(转载)
  3. Linux 死机时抢救措施
  4. 配置交换空间与文件系统的备份
  5. 解决wireshark打开错误
  6. C# 无法识别的转义序列
  7. 中兴通讯首届郑和杯无线应用创作挑战赛正式启动
  8. 中标麒麟系统u盘安装_中标麒麟u盘安装电脑系统方法
  9. optparse的模块编译参数使用
  10. C++11的dynamic_cast