基于hadoop构建对象存储系统_Hadoop社区正式支持腾讯云对象存储COS
8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持。后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量数据的读写任务。这标志着腾讯云对象存储技术受到了全球最主流大数据开源社区的认可。
大数据分析需要花费大量的计算和存储资源。在传统模式下,计算与存储资源耦合度较高,一旦资源不够,就需要对二者同时进行扩容。近年来,在云计算的推动下,开发者逐渐开始采用云上对象存储,来实现计算与存储的分离,进而提升资源的灵活性,并降低成本。
Hadoop是目前应用最为广泛的分布式大数据处理框架,也是大数据处理领域事实上的标准。在数据价值越来越被重视的时代,Hadoop也在互联网、政务、金融等行业中被广泛使用。
腾讯云对象存储COS是一种具备安全稳定、海量、便捷、低延迟、低成本等特点的云端分布式存储服务,其底层采用腾讯自研存储引擎YottaStore,能够实现单集群理论管理百万级节点,并且做到真正的按需扩容,磁盘利用率达到 90% 以上。
Hadoop社区支持腾讯云对象存储以后,开发者在基于Hadoop架构进行大数据分析时,能够无缝使用到腾讯云对象存储COS提供的高速云存储服务。
“开发者在腾讯云上可以使用弹性 MapReduce(EMR)计算,并直接使用腾讯云对象存储COS作为后端存储,整个过程都不需要额外添加代码,更加方便和快捷。”腾讯云对象存储负责人介绍。
目前,小红书、猎豹移动、珍爱网等就使用了腾讯云“EMR on COS”的计算与存储分离模式,快速构建和部署大数据分析程序,有效地满足了大数据业务需求。
http://news.zol.com.cn/749/7498874.html
news.zol.com.cn
true
中关村在线
http://news.zol.com.cn/749/7498874.html
report
1301
8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持。后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量数据的读写任务。这标志着腾讯云对象存储技术受到了全球最主流大数据开源社...
基于hadoop构建对象存储系统_Hadoop社区正式支持腾讯云对象存储COS相关推荐
- Hadoop社区正式支持腾讯云COS,全球大数据开发者将无缝使用中国云存储
8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持.后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量 ...
- 微信小程序基于腾讯云对象存储的图片上传
在使用腾讯云对象存储之前,公司一直使用的是传统的FTP的上传模式,而随着用户量的不断增加,FTP所暴露出来的问题也越来越多,1.传输效率低,上传速度慢.2.时常有上传其他文件来攻击服务器,安全上得不到 ...
- 腾讯云对象存储 python_GitHub - fushall1104/cos-python3-sdk: 腾讯云对象存储服务(cos)Python3.5版本SDK...
cos-python3-sdk 腾讯云对象存储服务(cos)Python3.5版本SDK *此版本非官方版本 项目进展:开发完成(分片上传待测试) 项目的来由:做基于Django个人网站时,采用了腾讯 ...
- 腾讯云对象存储 COS 荣获对象存储领导力奖!!!
本文转自"亚太CDN产业联盟"公众号 亚太内容分发大会暨 CDN 峰会一直致力于推动 CDN 产业深度融合发展和市场普及,现已成为亚太地区影响力最大的内容分发网络盛会.十年来,在以 ...
- 腾讯云对象存储COS + 数据万象CI = 完善的图片解决方案
沈唁 PHP工程师,开源爱好者,WordPress插件Sync QCloud COS 作者,GitHub@sy-records 在日常开发当中,我们必然会遇到一些图片存储问题,例如用户头像.聊天产生的 ...
- 腾讯云对象存储 python_python 云存储
广告关闭 云服务器1核2G首年99年,还有多款热门云产品满足您的上云需求 存储桶 bucketxml python sdk 存储桶名称由两部分组成:用户自定义字符串 和 appid,两者以中划线&qu ...
- 玩玩短视频平台和网课平台开发1——腾讯云对象储存COS的初步配置
近一两年来,抖音.快手等以短视频为手段的社交工具红遍了大江南北,腾讯也推出了"微视"平台,希望分一杯羹:传统的直播平台如:斗鱼直播.虎牙直播就更不用说了,甚至涌现了许多主打&quo ...
- 硅谷课堂 06_整合腾讯云对象存储和课程分类管理
硅谷课堂第六天-整合腾讯云对象存储和课程分类管理 文章目录 硅谷课堂第六天-整合腾讯云对象存储和课程分类管理 一.讲师管理模块整合腾讯云对象存储 1.腾讯云对象存储介绍 1.1.开通"对象存 ...
- 认证+1!腾讯云对象存储COS、存储一体机TStor首批通过信通院云原生存储能力评估
数字经济发展日新月异,企业走向数字化,诞生了海量的软件和服务.软件行业高数据规模,高自动化.高迭代速度的要求,给传统软件行业带来了挑战.为推动软件架构更加健全,管理更加高效,云原生的概念应运而生,强调 ...
最新文章
- [转]符号和运算符参考 (F#)
- 2021网络药理学研究的免费数据库、在线平台与软件工具汇总整理介绍
- 访客IP API接口
- PyQt5应用与实践
- .NET 5 和 C#9 /F#5 一起到来, 向实现 .NET 统一迈出了一大步
- neo4j / cypher:悬挂查询参数
- unix 登录mysql_实例分析mysql用户登录。
- Ubuntu 18.04安装NVIDIA(英伟达) RTX2080Ti显卡
- (转)shiro权限框架详解05-shiro授权
- TSDF算法笔记(转)
- mysql安装,数据库连接
- hexo博客搭建及主题优化(二)
- VBA生成KML文件
- 真无线蓝牙耳机选购小技巧!2020五款优秀低延迟蓝牙耳机推荐
- 局域网bs虚拟服务器怎么创建,搭建局域网地图服务器
- android10手机运行内存怎么查看,安卓手机怎么查看手机内存
- Pycharm Setting Python Interpreter
- 数据结构与算法——给定整数A1,A2,....An,....(可能有负数),求该数据序列的最大子序列的和
- PhotoShop如何导出线性空间下的图片
- 我的2018新年计划
热门文章
- wos 文献被引_CiteSpace与Histcite在文献引用上的区别
- python 会计凭证_实际工作中,大多数单位都使用单式记账凭证。()
- 使用Maven构建Web项目-测试
- 基于JAVA+SpringMVC+Mybatis+MYSQL的驾照在线考试系统
- JAVA基础系列:Arrays.sort()
- KUDU数据导入尝试一:TextFile数据导入Hive,Hive数据导入KUDU
- 使用EL表达式,显示Action中的数据
- 【GStreamer开发】GStreamer基础教程07——多线程和Pad的有效性
- mySQL 分组查询,根据分组的字段,取最小值
- Internet信息服务找不到