案例与解决方案汇总页:
阿里云实时计算产品案例&解决方案汇总

本文为您介绍实时计算在天猫双十一大屏业务中的应用。


天猫双十一大屏背后最强大最核心的支持力量来自于阿里云实时计算。曾经天猫双十一大屏后台流式计算使用开源的Storm来进行开发,整个开发时间长达一个月。现在使用阿里云实时计算 SQL,将整个双十一大屏的开发周期缩短到一周,并且由于阿里云实时计算底层完全屏蔽了故障处理、执行优化,最终上线的阿里云实时计算作业比Storm更快、更高效。

下面是天猫双十一整体数据流图。天猫使用了阿里云实时计算平台,让整体处理链路变得更加稳定和高效。


  1. 用户在线抢购

    海量的天猫用户使用天猫的购买系统进行双十一抢购活动。在天猫交易的高峰期,如11日凌晨0点的诸多秒杀活动,整个实时计算的面临的顶峰性能可能高达数十万订单/秒。

  2. 数据实时采集

    数据采集系统将数据库变更日志采集并进入DataHub系统。使用阿里集团内部的数据库变更日志复制计算(阿里云对应的产品名称为DTS),在线交易数据库即使在零点最高峰交易时段,也可以保证在数秒内将数据写入DataHub。

  3. 数据实时计算

    阿里云实时计算订阅上述DataHub的流式数据,持续读取并计算截止到当前时间点的天猫成交总和。阿里云实时计算单机群规模达数千台,支持吞吐量可达百万级/秒,可以轻松应对天猫每秒数十万笔的交易量。实时计算对数据进行实时的订阅和实时的计算,并将结果数据即时的写入到在线的RDS系统中。

  4. 前端可视化展现

    前端数据可视化组件团队为天猫双十一大屏专门定制了翻牌器、全球交易热点等诸多酷炫内容。前端服务器将定期轮询RDS系统,并利用Web前端技术实现双十一大屏的震撼效果。

实时计算在天猫双十一大屏中的应用相关推荐

  1. 不懂代码,如何做出实时刷新的数据大屏?

    首先恭喜你,当你看到这篇文章的时候,不管你是小白还是大咖,你都将直接获得一个高级技能:轻松上手可实时刷新的酷炫大屏. 制作可视化大屏,一般有这么几种方案: 写代码调用数据和图表,比如写JS+Echar ...

  2. java实现年会微信签到,签到后在大屏中展示,导出签到信息

    java实现微信签到,签到后在活动大屏中实时展示签到人信息,也可以导出签到人信息用于抽奖. 一.微信公众号申请及配置 1.微信公众号申请,请参考https://jingyan.baidu.com/ar ...

  3. 微信公众号签到,签到后在活动大屏中实时展示签到人信息,也可以导出签到人信息用于抽奖

    根据公司要求,花2天做了一个微信公众号签到,效果不错,记录一下,以做备忘. 完整项目源码下载 一.微信公众号申请及配置 1.微信公众号申请,请参考https://jingyan.baidu.com/a ...

  4. Python搭建一个系统信息实时监控数据可视化大屏

    本文分享使用python搭建服务器应用的监控系统面板,主要流程如下: 1.数据库中创建数据表 2.建立数据库连接 实时数据插入数据表,实时查询更新面板数据准备 3.监控中心大屏制作 具体步骤: 1.创 ...

  5. 大屏中常用地图原型设计

    针对问题:在日常项目中,我们常常遇到需在大屏上以地图热力图的形式,展示各个省或地市相关指标情况.为了高保真的原型,那经常会遇到需要根据整体大屏的配色去画各省份的地图,目前百度可搜索地图照片,但无法修改 ...

  6. 【硬刚大数据】Flink在实时在实时计算平台和实时数仓中的企业级应用小结

    欢迎关注博客主页:https://blog.csdn.net/u013411339 欢迎点赞.收藏.留言 ,欢迎留言交流! 本文由[王知无]原创,首发于 CSDN博客! 本文首发CSDN论坛,未经过官 ...

  7. 云原生大数据架构中实时计算维表和结果表的选型实践

    简介: 随着互联网技术的日渐发展.数据规模的扩大与复杂的需求场景的产生,传统的大数据架构无法承载. 作者 | 志羽 来源 | 阿里技术公众号 一 前言 传统的大数据技术起源于 Google 三架马车 ...

  8. 阿里巴巴双11数据大屏背后的实时计算处理

    作者:藏六.黄晓锋.同杰 1.双11数据大屏的实时计算架构 1.1 背景 2016年的双11我们的实时数据直播大屏有三大战场,它们分别是面向媒体的数据大屏.面向商家端的数据大屏.面向阿里巴巴内部业务运 ...

  9. 【双11背后的技术】双11数据大屏背后的实时计算处理

    选自<不一样的技术创新--阿里巴巴2016双11背后的技术>,全书目录:https://yq.aliyun.com/articles/68637 本文作者:藏六  黄晓锋  同杰 1. 双 ...

  10. 第六章 大数据,6.1 双11数据大屏背后的实时计算处理(作者:藏六 黄晓锋 同杰)...

    6.1 双11数据大屏背后的实时计算处理 1. 双11数据大屏的实时计算架构 1.1 背景 2016年的双11我们的实时数据直播大屏有三大战场,它们分别是面向媒体的数据大屏.面向商家端的数据大屏.面向 ...

最新文章

  1. Uva 10048 - Audiophobia (Floyd变形)
  2. List复制:深拷贝和浅拷贝用法及区别
  3. 详解@Builder用法
  4. 动态规划--电路布线(circuit layout)
  5. linux 如何赋值目录,Linux文件系统之目录的建立
  6. 精通init ramfs构建
  7. [Kaggle] Digit Recognizer 手写数字识别(卷积神经网络)
  8. 我的log4net使用手册(转自 http://blog.csdn.net/lyjcn/archive/2009/08/11/4432833.aspx)
  9. apache php 调优_LAMP服务器性能优化技巧之加速PHP
  10. Android Framework内核之旅
  11. GB35114---基于openssl加密库进行开发(一)
  12. java.lang.reflect.UndeclaredThrowableException
  13. 网络表情NLP(二)︱特殊表情包+emoji识别
  14. 查看IP和MAC地址的命令
  15. HTTP请求/响应报文结构
  16. Qt OpenGL(08)通过递归细分正二十面体逼近球面
  17. 老九学堂 学习C++ 第六天
  18. Godaddy域名A记录解析详细教程
  19. 【从零开始学C语言】知识总结一:C语言的基本知识汇总
  20. Mycat(三)——几种分片规则 分库 一致性hash的原理及使用

热门文章

  1. 《Effective Java 3rd》读书笔记——泛型
  2. 线程与进程的区别及其通信方式
  3. 机器学习的数学(三)范数的简单介绍
  4. Python入门之类与面向对象(一)
  5. 贝叶斯分类与贝叶斯网络
  6. HTML - 元素/标签和属性基础
  7. Identity Mappings in Deep Residual Networks2016【论文理解】
  8. django框架搭建网页后台,运行后网页打不开的解决方法--windows系统下
  9. 使用std:sort和Eigen根据矩阵某一行/列元素对矩阵的行/列排序
  10. 蓝桥杯2015年第六届C/C++省赛A组第九题-垒骰子