深度解析双十一背后的阿里云 Redis 服务
在一片欢呼之中,2018年的双十一完美收官,各项数据不出意外的刷出了新的记录,亮眼的数据背后是阿里过硬的技术支撑。其中阿里云Redis不仅保障了阿里集团内部业务双十一的流量洪峰平稳度过,也让使用阿里云Redis的各个客户度过了一个安稳省心的双十一。
目前阿里云Redis涵盖了丰富的产品形态:主从、集群、读写分离、同城容灾、异地多活,可以选择单副本,双副本,还有混合存储类型。
主从规格的Redis具有100%的兼容性;
读写分离增加只读节点承担读流量,成本最优;
集群规格大容量、高性能,突破单机性能极限,兼容redis cluster, sentinel等多种架构,上云无忧;
同城容灾双机房部署,整机房故障切换到正常机房;
异地多活让业务全球部署,就近写入,自动全球实时同步。
此外,阿里云Redis还拥有热备份、账号、安全等功能,满足业务的各项安全上的需求。本文将简单介绍下2018年双十一的部分业务场景。
直播
直播在双十一期间也迎来流量高峰,观看直播的用户每发一条评论背后就会使用阿里云的Redis的服务。直播平台会对每条评论写入两条数据:索引和用户评论,索引使用Redis的SortedSet数据结构对评论进行排序,而评论内容本身使用Hash存储。获取评论的时候,先读索引,再访问对应Hash拿到评论列表。评论的写入过程如下:
现在的直播必不可少的就是弹幕,和评论一样,异常直播弹幕的写入QPS可能非常高,并且用户遍布全国各地甚至是分布在全球的华人,一条在美国发出的弹幕跨洋写进部署在国内,时延是不可接受的,物理距离的限制就算是低延迟的Redis也无能为力,各个地域单独部署一套存储又会造成不同地域的用户弹幕无法相互看到。阿里云Redis多活产品是为这种场景而生,每个地域部署一套Redis,用户就近写入,后端自动实时同步,跨洋的小伙伴感觉不再遥远。
菜鸟订单履行
双11用户在产生一个交易订单之后会随之产生一个物流订单。经过菜鸟仓配系统处理的订单,为了让仓配各个阶段能够更加智能的协同作业,决策系统会根据订单信息指定出对应的订单履行计划,包括什么时候下发仓、什么时候出库、什么时候配送揽收、什么 时候送达等信息,单据履行中心根据履行计划,对每个阶段按照对应的时间去履行物流服务。由于仓、配的运力有限,对于有限的运力下,期望最早作业的单据是业务认为优先级最高的单据,所以订单在真正下发给仓或者配之前,需要按照优先级进行排序。
订单履行中心通过使用Redis来对所有的物流订单进行排序决定哪个订单是最高优先级的。
微淘社区用户关系链
微淘社区承载了亿级淘宝用户的社交关系链,对于每个用户都有自己的关注列表,每个商家有自己的粉丝信息,整个微淘社区承载的关系链如下图所示。
Redis丰富的数据类型让这种关系链的存储变得简单,高性能保证了双十一期间业务仍如丝般顺滑。比如微淘社区使用了Hash存储用户之间的关注信息,包括:1)用户A是否关注过用户B;2)用户A/B的关系列表。
双十一大屏
双十一期间不光有出镜率最高的媒体中心数据大屏,还有很多技术和业务模块的监控数据大屏。这类大屏不仅要求数据实时性高,对可靠性要求也非常高,一旦出现异常,通过大屏可以快速展示出来。
数据缓存
大屏汇聚了所有业务或者技术模块的监控信息,具有来源广、数据量大、实时性高的特点,Redis的高性能低延迟满足需求。大量数据通过pipeline批量更新,存入数据库时使用update case when语句进行一次批量更新,效率非常高,大大缓解了数据库的压力。
竞争锁
大屏的高可用要求非常高,任何故障下大屏必须可以正常展示。整个大屏背后需要双机房甚至更多机房的部署,多个任务同时进行,基于Redis实现的竞争锁来保证一个任务实际执行。
机房搬迁
双十一之前阿里集团上海机房业务整体搬迁到张北机房,涉及数百Redis实例,同时迁移还需要满足几个要求:
同时要求Redis服务的搬迁对业务透明,不影响业务的正常服务;
必须保证数据的一致性,不丢不重;
数据同步必须具备断点续传功能;
具备回滚方案,一旦业务切换出现问题,可以随时切换回来。
阿里云Redis多活不仅完全满足了业务所提出的需求,还已经产品化和自动化,整个迁移过程用户只需要在控制台上点下鼠标即可完成,实例状态,后端的数据同步状态实时显示在控制台上。
结束
Redis是一个优秀的开源数据库,提供了开发者更便利的数据模型,阿里云Redis致力于提供稳定、高性能的Redis服务,欢迎广大开发者使用阿里云Redis服务。
原文链接
本文为云栖社区原创内容,未经允许不得转载。
深度解析双十一背后的阿里云 Redis 服务相关推荐
- 图解2018双十一背后的阿里云技术
去年电商的"双十一"大战已经落下帷幕,个个平台都公布了"双十一"当天的销售额,总的来说,本次"双十一"各平台依旧保持高速增长的趋势.据数据机 ...
- 图解2017双十一背后的阿里云技术
今年电商的"双十一"大战已经落下帷幕,个个平台都公布了"双十一"当天的销售额,总的来说,本次"双十一"各平台依旧保持高速增长的趋势.据数据机 ...
- 王义成:阿里云Redis服务助力游戏行业发展
2018数据库直播大讲堂峰会Redis专场,来自阿里云高级产品专家王义成带来Redis助力游戏行业的相关演讲.主要从传统数据库的压力开始谈起,着重介绍了阿里云Redis产品架构以及不同的版本,接着对R ...
- ServiceStack.Redis连接阿里云redis服务时使用连接池出现的问题
创建连接池 1 private static PooledRedisClientManager prcm = CreateManager(new string[] { "password@i ...
- 阿里云Redis典型场景:如何构建可扩展通用排行榜系统
点击有惊喜 摘要 本文主要介绍通用排行榜的需求功能,并介绍了基于Redis的ZSET数据结构的排序方法,另外探讨了通用排行榜的架构及用户如何通过阿里云Redis解决通用排行架构的技术问题. 背景 移动 ...
- 阿里云Redis百万千万读写慢排查实战
背景 20万数据 100M,单条平均大小100K写入redis花费6-8分钟,计算一下NetWork有多少,公式2:100 *1024 KB/360S=284KB/S,发现只有这么点,验证实际是否这样 ...
- 双十一丝般顺滑体验背后:阿里云洛神网络虚拟化系统揭秘
摘要: 摘要:2017年12月20日在北京云栖大会上,阿里云高级技术专家梵叶在计算与网络分论坛上做了主题分享<双十一丝般顺滑体验背后:阿里云洛神网络虚拟化系统揭秘>.为大家介绍了洛神系统的 ...
- 【观察】晋级CNCF白金会员背后,阿里云为何如此看重开源?
美国当地时间12月6日,在"KubeCon + CloudNativeCon"峰会上,阿里云正式成为云原生计算基金会Cloud Native Computing Foundatio ...
- 3月13日云栖精选夜读:通过阿里云容器服务深度学习解决方案上手Caffe+多GPU训练
阿里云容器服务提供的深度学习解决方案内置了对Tensorflow, Keras, MXnet框架的环境,并支持基于它们的深度学习模型开发.模型训练和模型预测.同时,对于模型训练和预测,用户还可以通过指 ...
最新文章
- Spring-基于注解的配置[01定义Bean+扫描Bean]
- c语言通用Makefile
- '#selector' does not refer to an '@objc' method,No method declared with Objective-C selector 'compos
- windows下利用_popen,_wopen创建管道进行系统命令输出数据
- 表格合并行_合并行table表格
- nginx自定义500、404错误页面
- linux usr local权限,【linux】sudo chown -R $(whoami) /usr/local提示操作被拒绝
- 感叹号挖孔屏稳了!iPhone 14 Pro高清概念图曝光:屏占比创5年最高
- js控制网页WMP播放的属性
- 隔壁小孩也能看懂的面向对象(概念篇)
- Centos系统修改远程端口
- 十大排序算法-桶排序(c语言实现)
- 智能供应链预测的应用
- HTML文件不小心删了怎么办,不小心删除的文件怎么恢复
- HttpClient登陆开心网
- Java程序员怎么规划五年职业生涯
- pulsar client jar包选择-shaded 还是original
- vue异常报错解决 Missing ref owner context. ref cannot be used on hois 或者是 Cannot read property ‘refs‘ of n
- 案例分享 | CEVA 使用 TensorFlow Lite 在边缘设备部署语音识别引擎及前端
- 基于Simulink的开关电源仿真设计
热门文章
- ios 获取沙河文件夹_iOS开发之获取沙盒路径
- 邢台职业技术学院计算机系宿舍,邢台职业技术学院宿舍条件怎么样 男生女生宿舍图片...
- python桌面翻译_Python实现桌面翻译工具【新手必学】
- python计算样本方差_Python计算库numpy进行方差/标准方差/样本标准方差/协方差的计算...
- 人声处理_人声美化:人声后期处理方法
- linux shell rman删除归档_我们一起学一学渗透测试——黑客应该掌握的Linux基础
- 13篇顶会!25岁成985高校博导,入职半年发ICML,网友:万点暴击
- 博士毕业2年后,他成为985大学副院长
- 教育部:麻省理工学院2019年本科生未招收一名中国大陆的学生不属实
- 姚班天才少年鬲融凭非凸优化研究成果获得斯隆研究奖