大数据平台

大数据平台,顾名思义就是整合网站应用和大数据系统之间的差异,将应用程序产生的数据导入到大数据系统,经过处理计算后再导出给应用程序使用。

大数据平台架构

互联网大数据平台

互联网产品处理用户请求,需要毫秒级的响应,要在 1 秒内完成计算,普通大数据计算必然不能实现这样的响应要求。

如何才能弥补这互联网和大数据系统之间的差异呢?

解决方案就是将面向用户的互联网产品和后台的大数据系统整合起来,也就是构建一个互联网大数据平台。

图是一个典型的互联网大数据平台的架构。

在这张架构图中,大数据平台里面向用户的在线业务处理组件用褐色标示出来,这部分是属于互联网在线应用的部分,其他蓝色的部分属于大数据相关组件,使用开源大数据产品或者自己开发相关大数据组件。

你可以看到,大数据平台由上到下,可分为三个部分:数据采集、数据处理、数据输出与展示。

大数据平台产品

互联网大数据平台提供了数据获取、存储、计算、应用的技术方案,挖掘出这些数据之间的关系,让数据发挥价值。

我们在京东购物,阅读新闻、刷视频,背后其实都有智能推荐算法。这些算法不断分析、计算我们的购物偏好、浏览习惯,然后为我们推荐可能喜欢的商品、文章、视频。事实上,这些产品的推荐算法是如此智能、高效,以至于我们常常一打开商城,就浏览个不停。

如图:基于用户属性的推荐是相对比较简单的一种推荐算法。根据用户的基本信息进行分类,然后将商品推荐给同类用户。

用户 A 和用户 C 的年龄相近,性别相同,那么可以将用户 A 和用户 C 划分为同类。用户 A 喜欢商品 D,那么推测用户 C 可能也喜欢这个商品,系统就可以将这个商品推荐给用户 C。图中示例比较简单,在实践中,还应该根据用户收入、居住地区、学历、职业等各种因素进行用户分类,以使推荐的商品更加准确。

JD Cloud大数据平台

JD Cloud推出了这个一站式大数据服务平台,为企业客户提供数据的采集、存储、挖掘、分析等数据生态链服务。

大数据中台

大数据中台是一个数据集成平台,它不仅仅是为数据分析挖掘而建,它更重要的功能是作为各个业务的数据源,为业务系统提供数据和计算服务。

数据从软件诞生的那一天开始就存在,但是,数据并不是第一天就被存储和利用的。在信息化时代,企业早期通过流程来进行生产和管理,流程是预先设计好的,然后在设计好的流程中产生了数据。比如现在销售部门依赖于CRM(客户关系管理平台),售后部门主要看客服系统,市场营销部门关心微信平台,数据分析团队使用各类数据分析工具…在这个过程中,各个企业分别都在用不同的方式来尽可能的利用数据产生的价值。但是随着企业为了适应需求端(市场和消费者)的变化,早期工具各自产生新的、孤立的、片面的客户数据,却无法快速同步,甚至团队之间还怀疑对方数据是否正确。因此,企业急需调整和改革供应端(生产制造和供应链),也就是需要一个统一真实的数据源来描述客户,而不是任由客户的不同维度数据由不同部门各自存储,于是在这样的场景下数据中台应运而生。

数据中台跟之前大数据平台最大的区别,在于数据中台距离业务更近,能更快速地响应业务和应用开发的需求,可追溯,更精准。

JD Cloud用户数据平台

JD Cloud用户数据平台(CDP)基于中台构建这种服务时是考虑到可复用性的,每个服务就像一块积木,可以随意组合,非常灵活,有些个性化的需求在前台解决,这样就避免了重复建设,既省时、省力,又省钱。

关于大数据的大数据平台相关推荐

  1. 大数据精准投放平台_大数据库(可视化精准平台,能够使您的广告更加精准有效)...

    国内领先的数字化营销平台 公司介绍:我们(湖北繁盛影视传媒有限公司)专注于大数据分析+数字化营销,是一家国内领先的互联网广告公司,在通过利用深度数据分析挖掘工具,领先的可视化报表处理功能,高精度的实时 ...

  2. 智能交通大数据及云应用平台解决方案

    来源:网络大数据 摘要:随着日益增长的交通"大数据",给交通管理创新带来的新挑战,以及对交通管理工作提出的新要求,交通信息化建设必然步入云计算智慧应用阶段,利用云计算破解当前诸多交 ...

  3. 【2017年第4期】流式大数据实时处理技术、平台及应用

    陈纯 浙江大学计算机科学与技术学院,浙江 杭州 310058 摘要:大数据处理系统根据其时效性可分为批式大数据和流式大数据两类.上述两类系统均无法满足"事中"感知查询分析处理模式的 ...

  4. 数据可视化、模板框架、动态控件、可视化大屏、数据监管、监控平台、图表元件库、数据看板、驾驶舱、统计图表、园区、大屏展示、安防、智慧城市、旅游、健康、医疗卫生、交通、农业、政务、AI、食品、医院、安全

    数据可视化.模板框架.动态控件.可视化大屏.数据监管.监控平台.图表元件库.数据看板.驾驶舱.统计图表.园区.大屏展示.安防.智慧城市.旅游.健康.医疗卫生.交通.农业.政务.AI.食品.医院.数据安 ...

  5. 数据可视化、模板框架、动态控件、可视化大屏、数据原型、监控平台、图表元件库、数据看板、驾驶舱、统计图表、消防、大屏展示、安防、智慧城市、旅游、运输、医疗卫生、贸易、电力、政务、水质、工业园区环境监测

    数据可视化.模板框架.动态控件.可视化大屏.数据原型.监控平台.图表元件库.数据看板.驾驶舱.统计图表.消防.大屏展示.安防.智慧城市.旅游.运输.医疗卫生.贸易.电力.政务.水质.工业园区环境监测 ...

  6. 社会治理智慧平台、联动指挥、综合执法、数据汇集、数据研判、智慧政务、图表模板、大屏、可视化、智慧工厂、办公、能源、医疗、校园、自动化综合车间大屏、车间数据、人力资源、员工考核、医院、rp原型

    社会治理智慧平台.联动指挥.综合执法.数据汇集.数据研判.智慧政务.图表模板.大屏.可视化.智慧工厂.办公.能源.医疗.校园.自动化综合车间大屏.车间数据.人力资源.员工考核.医院.Axure原型.r ...

  7. 大数据可视化模板、模板框架、动态控件、可视化大数据原型、监控平台、图表元件库、数据看板、驾驶舱、统计图表、大数据驾驶舱、大屏展示、联勤治理、旅游、运输、车辆、校园、舆情、信息监测看板原型

    大数据可视化模板.模板框架.动态控件.可视化大数据原型.监控平台.图表元件库.数据看板.驾驶舱.统计图表.大数据驾驶舱.大屏展示.智慧安防.党建.旅游.运输.医疗.校园.工业园区环境监测看板原型 适用 ...

  8. Axure高保真智慧消防远程监管系统数据可视化大屏看板+web端高保真大数据分析平台看板+大数据交换配置管理平台大屏动态可视化看板

    作品介绍:Axure高保真智慧消防远程监管系统数据可视化大屏看板+web端高保真大数据分析平台看板+大数据交换配置管理平台大屏动态可视化看板 原型交互及下载链接:https://www.pmdaniu ...

  9. 电信行业大数据(大数据平台系列)

    电信行业大数据(大数据平台系列) 电信行业拥有体量巨大的数据资源,单个运营商的手机用户每天产生的话单记录.信令数据.上网日志数据可以达到PB级规模.通过大数据技术,运营商可以提升数据处理能力,聚合海量 ...

  10. 什么是大数据和大数据平台?

    "大数据"时下一个热门的词语,近几年来,关于大数据的著作和文章铺天盖地,似乎也在共同在传递一个信息:越来越多的行业.人士开始关注并实际探索大数据的应用,我们正在一起描绘着大数据巨大 ...

最新文章

  1. Python 类函数迭代器
  2. 数据仓库工具箱:维度建模权威指南3
  3. c语言中枚举类型的长度,C中的枚举类型数据的大小是多少?
  4. linq 查询的结果会开辟新的内存吗?
  5. 动漫的python语言代码大全_下载动漫壁纸-Python代码
  6. SpingMVC 执行的流程
  7. 补习系列(12)-springboot 与邮件发送
  8. 2018腾讯内部转岗面试题3——找出数组中比左边大比右边的小的元素
  9. logrotate日志管理工具
  10. 基于SSM的网上购物商城管理系统
  11. 应用安全测试技术DAST、SAST、IAST对比分析-持续更新
  12. phpwind database.php,phpwind中的数据库操作类
  13. QML树控件TreeView的使用(上)
  14. DynamicModuleUtility对象在.net不同版本下的兼容性问题
  15. OJ每日一练——羞涩的答复
  16. 苹果新功能惹众怒,4000多家组织和个人签署公开信 敦促苹果放弃“儿童安全”功能
  17. 企业级SSD产品对比
  18. 第16届百度智能车比赛-方案制定与选择(技术报告)
  19. 使用jsonp获取腾讯天气接口案例
  20. 如何在Mac电脑中切换ctrl键和command键的功能?

热门文章

  1. 关于2021年个人公众号总结
  2. php短信验证码接口免费,[php短信验证码接口]PHP 短信验证码
  3. angular uibpagination 分页相关
  4. 基于51单片机的数字电流电压表
  5. bug - Nacos - Ignore the empty nacos configuration and get it based on dataId
  6. 安卓按键命令库教程(紫猫版)
  7. 三年云转型,近200%的高增速,神州数码做对了什么?
  8. 领跑衫获奖感言 课程总结
  9. AI插件开发入门教程001 - AI脚本简介
  10. 主流计算机戴尔笔记本电脑,2017年50款笔记本电脑排行榜