近两年产业界总用“数据洪流”来形容数据的大爆发,但如果我们真把它视作洪水,那么它只会带来冲击;如能积极发掘其潜藏的价值,它则可能变成一条流金之河,正如麦肯锡在研究中发现的那样:与竞争对手相比,能使用数据识别客户行为的企业,在销售增长率方面要高出85%,在毛利率方面会高出25%[1]

这个道理,其实大多数企业都清楚,但要构建完善的数据处理和分析平台,难度并不比构建AI应用平台低,对他们而言,通过公有云服务获得这种能力反而更现实。

那么,云服务提供商应该怎样做,才能打造出一个高效、全面和可靠的数据即服务呢?根据先行者们的经验,导入“建筑师”思维是必需的,也就是说,要用盖大楼那样的思路来构建数据即服务。

就像起高楼必须先挖地基一样,云服务提供商首先要考虑数据即服务的“地基”,也就是数据存储的问题。在各行各业全面拥抱数字化趋势的今天,存储服务的要求更多地体现为:容量和性能要实现高效扩展,相关资源可进行灵活调配和快速交付。

接下来,在数据存储的“地基”之上,要筑起坚实的“楼体”,也就是提供数据库即服务,将繁琐的数据库预置、配置、优化、备份、安全、监控、联网、自动化、升级及维护等操作,全部交给自动化数据库管理系统来处理。

最后一步,就是要在“楼体”上加装顶层,也就是大数据或数据分析即服务,海量数据将通过它的清洗、挖掘、分析和可视化等操作,提炼出高价值、易理解和检索的关键信息,或者说是洞察。

云服务提供商还需要确保上述不同层级间各模块和功能之间能形成协作,而非各自为政。如金山云的数据即分析服务KMR(Kingsoft MapReduce),就与其对象存储KS3、表格数据库服务和关系型数据库服务(KRDS)实现了集成。其用例之一,就是用户可在得到分析结果后将其存入KS3,然后释放按时计费的KMR集群,以节省成本[2]

有了设计思路,云服务提供商就要操心“钢筋水泥”,即基础设施的选择了。由于这个体系自下而上,对硬件的需求从重存储,渐渐过渡到重计算,所以这两点就是考量的重点。

先谈存储,数据即服务应优先考虑软件定义存储,它利于创建跨服务产品使用,且易于管理和调配的共享存储资源池。

英特尔平台+Ceph技术是实施软件定义存储的理想之选。Ceph是目前唯一能提供开源存储、软件定义存储、企业级存储和统一存储(对象、块和文件)的解决方案。它与至强处理器搭配,再辅以英特尔智能存储加速库(让应用能使用至强加速与数据保护、完整性和安全性相关的任务)、高速缓存加速软件(让Ceph可通过智能缓存提高性能),以及高性能、低延迟、高稳定和耐用的英特尔固态盘和傲腾固态盘等技术,可输出令人满意的性能和总拥有成本。

再谈计算,英特尔的优势更加明显:不仅有新一代至强可扩展处理器凭借全新微架构带来的加成,还有诸多开源和商业版本数据库及数据处理和分析技术,如Apache Hadoop、Spark、SAPHANA带来的“众星捧月”效果。两者融合就产出了一串更诱人的数据,如SAP HANA每小时执行的查询量可提高至1.5倍[3],IBM DB2批量分析的平均速度提高至1.4倍[4]

这些英特尔新技术带来的功效可不是纸上谈兵,抛两个身边的真实“战例”:

-      腾讯金融云TDSQL服务升级采用至强可扩展处理器、英特尔Omni-Path架构和傲腾固态盘,写性能提高至原来的3倍,读性能提升到原来的4倍,整体性能提升至原来的1.7倍[5]

-      用友分析云平台在升级使用至强铂金8180处理器后,性能归一化指标比使用至强E7-8890 v4时提升42%,搭配傲腾固态盘后,性能更是提升达92%[6]

数据与信息来源:

[1]: 麦肯锡,2017年,《利用您的客户数据获取价值》,https://www.mckinsey.com/business-functions/mckinsey-analytics/our-insights/capturing-value-from-your-customer-data

[2]: 白皮书《金山云助力实现云端数据分析》,https://www.intel.cn/content/www/cn/zh/cloud-computing/kingsoft-cloud-enables-data-analytics-in-the-cloud.html

[3]、[4]:白皮书《数据分析:面向云服务提供商的指南》, https://connect.intel.com/analytics_eguide_reg

[5]: 白皮书《铸就智慧金融的“芯”动力——英特尔助力腾讯云提供基于TDSQL的高效、安全金融云服务》,https://www.intel.cn/content/www/cn/zh/cloud-computing/tencent-financial-cloud-case-study.html

[6]: 白皮书《英特尔技术助力用友分析云向用户提供全分析服务解决方案》,即将上传。

并发、时延、成本等各方面,都对云平台的基础设施提出了更高的要求。点击阅读原文,登上至强特快专列,了解成功的云服务提供商如何高效打造差异化的云服务。

↓↓↓详情请查看【阅读原文】

必须建筑师附体!像盖大楼那样打造数据即服务相关推荐

  1. 〖微小说〗盖大楼【二十六】

    [微小说]盖大楼[二十六] 2011年11月25日 女友:我们能分手吗?男友:不可以.女友:为什么?男友:就像这食堂的包子,你咬了一口,人家肯给你换吗 女友:可你没我想象的好 男友:就像食堂的包子,你 ...

  2. 从零开始打造数据中心的N道门槛 | 又拍干货分享

    从零开始打造数据中心的N道门槛 | 又拍干货分享 weixin_33716941 2016-12-19 07:56:55  31  收藏 文章标签: 运维 版权 分享 | 莫江成 整理 | 西北 12 ...

  3. 看大众点评如何通过实时监控系统CAT打造7*24服务

    为什么80%的码农都做不了架构师?>>>    看大众点评如何通过实时监控系统CAT打造7*24服务 2015-06-08  尤勇  高可用架构 https://github.com ...

  4. 元宇宙iwemeta: 重庆打造“数据之都”,拟成立重庆数据交易所

    重庆打造"数据之都",拟成立重庆数据交易所.重庆数据交易所,简称重数所. 重庆数据交易所,围绕确权难.定价难.互信难.入场难.监管难等关键共性难题,形成公共性数据资产交易所,提供数 ...

  5. 基于Asp.Net Core打造轻量级内部服务治理RPC(二 远程服务设计)

    紧接上一篇<基于Asp.Net Core打造轻量级内部服务治理RPC(一)>文章.本文主要讲解基于Asp.Net Core的远程服务设计和实现. 在上一篇中讲过,服务提供者提供的服务实际上 ...

  6. 基于Asp.Net Core打造轻量级内部服务治理RPC(一)

    继之前的<Asp.Net Core + Docker 搭建>文章末尾说过的,将陆续编写基于asp.net core 打造一个内部服务治理的rpc框架.不过前端时间较忙,所以搁置了一段时间. ...

  7. 数据驱动科技赋能,东吴证券打造数据中台“九大能力”

    公司简介 东吴证券股份有限公司作为首家上市的地级市券商,扎根苏州,布局全国,树立"坚持根据地.融入长三角.服务中小微"战略导向,致力于为实体经济增添活力,为美好生活创造价值,建设公 ...

  8. CDA携手云网德国公司共同打造数据精英的国际化舞台

    前不久,CDA数据分析师又一海外培训项目签约落地,根据国内用户的需求,并基于航天云网(德国)有限公司(以下简称'云网德国公司')的INDICS德国子平台在欧洲当地汇聚资源的优势,合作双方一致同意在专业 ...

  9. 药明海德在苏州打造疫苗CDMO服务中国基地;现代汽车将在印尼新首都启用“空中出租车” | 美通企业日报...

    美通社要闻摘要: 现代汽车将在印尼新首都启用"空中出租车".Livent完成了美国最大氢氧化锂生产基地的扩建.IBM推出IBM Diamondback磁带库.药明海德在苏州打造疫苗 ...

最新文章

  1. 正确关闭WCF代理对象
  2. LeetCode 739. 每日温度(单调栈)
  3. 201912-4 区块链(CCF CSP认证)
  4. Visual Studio 2010 中编写C代码的一些常见问题
  5. C++_homework_StackSort
  6. Spring Boot Mybatis 搞反向工程,太方便咯。。
  7. 交易系统开发(五)——华锐柜台简介
  8. 人工智能数学基础---不定积分5:常用不定积分表
  9. Excel金额大小写转换公式
  10. Siri 和谷歌竟然暗藏《复联4》彩蛋!
  11. 移动端页面SEO优化需要注意的10个要点
  12. 卡方分布、卡方独立性检验和拟合性检验理论及其python实现
  13. 7-4 房产税费计算2022.6.24
  14. 触漫机器人_触漫携手壹心理打破亲子僵局 让爱驻家守护亲子健康
  15. 本地测试机构怎么查?第三方测试公司排名情况
  16. 无法安装net framework 3.5 的解决方法
  17. 学习笔记之——Java 8
  18. linux proc 文件系统下 entry 的解释(转)
  19. # 标题Windows最强神器,WIN+R的最骚使用方法!
  20. 左移寄存器vhdl_基于VHDL的移位寄存器设计

热门文章

  1. php中常用的全局变量有,在PHP中如何使用全局变量的方法详解
  2. java继承与多态性_Java继承与多态浅析
  3. unet作为服务器不显示画面,UNet:无法生成服务器对象(不使用NetworkManager)
  4. 计算机一级b考试教程,全国计算机等级考试一级B教程
  5. linux 运行scrapy,python 文件 运行 scrapy
  6. 办学10年,进入全国前10名!这所神奇的高校,迎来10岁生日
  7. 教育部:到2021年建设1万个左右国家级一流本科专业点
  8. 问答丨如何理解哈希表的工作原理?
  9. springboot 项目实战 基本框架搭建(IDEA)
  10. Python 的协程