公司介绍

我们杭州数云信息技术有限公司成立于2011年,伴随着电子商务、大数据应用和零售企业互联网化的趋势快速发展,目前已成为国内领先的数据化营销软件产品和服务提供商。我们致力于为消费品牌和零售品牌商提供整合软件产品、数据模型和专业服务的一站式数据化营销解决方案。

我们以软件产品为主线,以营销效果为导向,帮助企业深度挖掘大数据价值,持续构建自身的核心竞争优势。实现了以全渠道客户数据管理平台为基础,以CRM(客户关系管理)和BI(商业智能)为核心应用,并渗透到全渠道数据化营销、销售和服务各个接触点的价值闭环。我们的数据化营销管理软件支持公共云SaaS和专有云独立部署模式。

业务痛点

双十一当数云订单量超4亿,我们当时只有部分数据服务的功能已迁云,对其他业务产品进行查询,对流式计算的查询,过完双十一开始正式迁移更多功能流量,急需解决以下问题:

  • 有大促需求,在618/双十一等大促期间希望能快速(分钟级)弹升实例的规格和IOPS能力。
  • 涉及商家数据一致性读取,希望读写数据库的读节点延迟小,有较大的读写比,希望能够快速增加读节点。
  • 单机存储瓶颈,传统数据库单个实例只能存3T数据,单实例业务数据量大,维护成本高,代码配置复杂。
  • 高并发写诉求,对高并发状态下的写能力有较高要求。

解决方案

架构方案如下:

  • 安全接入:DDos高防IP产品用于保障服务器安全,并通过CDN产品实现访问加速。
  • 业务部署:通过SLB将流量均发至多个Nginx服务器集群,同时配备CRM Web服务器集群。
  • 数据存储:存储产品选用高性能、稳定的对象存储OSS;通过RDS、PolarDB、MongoDB和Redis进行业务数据处理,并配合MySQL和RDS进行数据ETL和精简化存储。

其中,主要通过PolarDB产品解决业务迁云中遇到的痛点问题:

  • PolarDB在大促期间可以在20分钟内完成10TB级数据的集群升配,具备快速弹升IOPS的能力。
  • PolarDB主节点和读节点之间采用物理复制的方式,读节点与主节点延迟大大低于普通的MySQL数据库,能满足对读节点的延迟要求;同时新增读节点,5-8分钟可以完成,保证能快速提升集群的读能力。
  • PolarDB采用共享存储架构,存储和计算分离,能够最大程度的提供单实例的存储能力,最大可达100TB,对于历史数据存储,海量在线数据存储都有较好的适配能力,降低代码复杂度和维护成本。
  • PolarDB通过引擎的优化和超强的IOPS能力提供高并发状态下的超强写能力,32个并发以上,OLTP写能力能达到普通MySQL的2-3倍。

上云价值

  • 天猫聚石塔商家,在双十一等业务大促时,需要对数据库计算能力(CPU、内存、IOPS)和存储量做临时升配,我们使用传统的MySQL数据库的时候,数据库升配时间会随着存储量的大小、宿主机资源的情况而不断上升,最大的实例可能升配要6-8个小时,当实例数多的时候,升配时间长、升配带来的运维成本高、由于资源冲突导致升配失败可能性增加,PolarDB提供节点升配10-20分钟、增加节点5-8分钟等高弹性能力,解决客户大促期间升配的痛点,是客户选择PolarDB的最重要原因。
  • 我们数云业务是天猫CRM系统提供商,数据库的部署模式是多租户部署,即每个实例上会部署一个或多个我们客户的数据,因此我们使用的数据库实例数据量都比较大,较大的实例一般是2T-3T,约有上百个实例来满足该业务需求,数据库连接使用比较复杂、管理成本较高,也存在单实例存储瓶颈需要做数据迁移,PolarDB的共享存储,解决了我们这三个痛点。
  • 我们多租户的数据库部署模式对单实例数据库的写能力有较高要求,PolarDB的高并发写能力远超过传统MySQL,解决了我们高并发写入的瓶颈问题。

证言

“通过PolarDB的高弹性能力,我们在双十一之前一两天做弹性升级,在双十一结束后弹性降配,满足数据库计算能力的分钟级弹性,在解决了我们大促弹升需求的同时,也帮我们节约了数据库的成本。同时由于业务数据量较大,单个实例需要较大的数据存储量,传统的单机数据库无法满足,PolarDB的存储计算分离能力帮我们解决了这个困扰我们很久的问题。双十一期间PolarDB的IOPS能力很稳定,连接数使用到当前规格的一半,还可以再承载更大的压力。”— 数云资深技术总监

相关产品

  • 云数据库PolarDB

    PolarDB是阿里巴巴自主研发的下一代关系型分布式云原生数据库,目前兼容三种数据库引擎:MySQL、PostgreSQL、高度兼容Oracle语法。

    更多关于云数据库PolarDB的介绍,参见云数据库PolarDB产品详情页。

  • 云服务器ECS

    云服务器(Elastic Compute Service,简称ECS)是阿里云提供的性能卓越、稳定可靠、弹性扩展的IaaS(Infrastructure as a Service)级别云计算服务。云服务器ECS免去了您采购IT硬件的前期准备,让您像使用水、电、天然气等公共资源一样便捷、高效地使用服务器,实现计算资源的即开即用和弹性伸缩。阿里云ECS持续提供创新型服务器,解决多种业务需求,助力您的业务发展。

    更多关于云服务器ECS的介绍,参见云服务器ECS产品详情页。

  • 负载均衡SLB

    负载均衡(Server Load Balancer)是将访问流量根据转发策略分发到后端多台云服务器(ECS实例)的流量分发控制服务。负载均衡扩展了应用的服务能力,增强了应用的可用性。

    更多关于负载均衡SLB的介绍,参见负载均衡产品详情页。

  • 内容分发网络CDN

    阿里云内容分发网络(Content Delivery Network,简称CDN)是建立并覆盖在承载网之上,由分布在不同区域的边缘节点服务器群组成的分布式网络。阿里云CDN分担源站压力,避免网络拥塞,确保在不同区域、不同场景下加速网站内容的分发,提高资源访问速度。

    更多关于内容分发网络CDN的介绍,参见内容分发网络产品详情页。

  • DDoS高防IP

    DDoS高防IP是针对互联网服务器(包括非阿里云主机)在遭受大流量DDoS攻击后导致服务不可用的情况下,推出的付费服务,用户可通过配置高防IP,将攻击流量引流到高防IP,确保源站的稳定可靠。

    更多关于DDoS高防IP的介绍,参见DDoS高防IP产品详情页。

  • 云数据库RDS

    阿里云关系型数据库(Relational Database Service,简称RDS)是一种稳定可靠、可弹性伸缩的在线数据库服务。基于阿里云分布式文件系统和SSD盘高性能存储,RDS支持MySQL、SQL Server、PostgreSQL、PPAS(Postgre Plus Advanced Server,高度兼容Oracle数据库)和MariaDB TX引擎,并且提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。

    更多关于云数据库RDS的介绍,参见云数据库RDS产品文档。

  • 云数据库 Redis 版

    阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务,基于高可靠双机热备架构及可平滑扩展的集群架构,可充分满足高吞吐、低延迟及弹性变配的业务需求。

    更多关于云数据库 Redis 版的介绍,参见云数据库 Redis 版产品详情页。

  • 对象存储OSS

    阿里云对象存储服务(Object Storage Service,简称 OSS),是阿里云提供的海量、安全、低成本、高可靠的云存储服务。其数据设计持久性不低于 99.9999999999%(12 个 9),服务设计可用性(或业务连续性)不低于 99.995%。

    更多关于对象存储OSS的介绍,参见对象存储OSS产品详情页。

原文链接
本文为云栖社区原创内容,未经允许不得转载。

数云:PolarDB助力数云轻松应对双十一相关推荐

  1. 轻松应对双11,百万级物理和虚拟网络设备的网络智能化实践

    摘要: 12月13-14日,由云栖社区与阿里巴巴技术协会共同主办的<2017阿里巴巴双11技术十二讲>顺利结束,集中为大家分享了2017双11背后的黑科技.本文是<双11的智能化网络 ...

  2. 阿里云 MSE 云原生网关助力斯凯奇轻松应对双 11 大促

    客户简介 斯凯奇(SKECHERS)1992 年诞生于美国加州,如今已遍布全球 170 多个国家地区.在美国是仅次于耐克的第二大鞋类品牌.2020 年 11 月斯凯奇宣布与阿里云达成合作,加速数字化升 ...

  3. 云HBase发布全文索引服务,轻松应对复杂查询

    云HBase发布了"全文索引服务"功能,自2019年01月25日后创建的云HBase实例,可以在控制台免费开启此"全文索引服务"功能.使用此功能可以让用户在HB ...

  4. hbase 查询_云HBase发布全文索引服务,轻松应对复杂查询

    云HBase发布了"全文索引服务"功能,自2019年01月25日后创建的云HBase实例,可以在控制台免费开启此"全文索引服务"功能.使用此功能可以让用户在HB ...

  5. 阿里云PolarDB数据库将云原生进行到底!业内首次实现三层池化

    10月20日,在2021云栖大会上,阿里云宣布自研云原生关系型数据库PolarDB重磅升级,实现内存池化.多主架构.HTAP实时分析等创新功能,进一步引领云原生数据库技术的持续创新. 阿里云智能数据库 ...

  6. Cloud一分钟 | 电商月将至,腾讯云DCDB助力电商企业应对支付洪峰

    Hello,everyone: 10月08早,星期五,祝大家工作愉快! 一分钟新闻时间: 推荐阅读 1.7亿条数据,比胡同和撸串更真实的北京 面趣 | 为什么要分稳定排序和非稳定排序? 使用动态规划解 ...

  7. 架构师---如何应对双十一和618大促

    一.高可用: 举例子说,系统的可用性要达到4个9(99.99%)那么根据上图可以看到是不能一年内超过53分钟.这样看的话确实很难达到.但是公式上说了是计划之外的.相当于是意外停机,而不是上线部署,系统 ...

  8. 阿里云POLARDB如何助力轻松筹打造5亿用户信赖的大病筹款平台?

    2019独角兽企业重金招聘Python工程师标准>>> 轻松筹首创了"大病救助"模式,帮助了众多病患在第一时间解決了医疗资金等问题,为了从源头解决了医疗资金问题. ...

  9. 4月24日云栖精选夜读 | 阿里云POLARDB如何助力轻松筹打造5亿用户信赖的大病筹款平台?...

    [点击订阅云栖夜读周刊] 轻松筹首创了"大病救助"模式,帮助了众多病患在第一时间解決了医疗资金等问题,为了从源头解决了医疗资金问题.而在轻松筹这样全球5.5亿用户信赖的大病筹款平台 ...

最新文章

  1. 一阶导与二阶导的关系_数学分析|第九章 定积分关于二阶导函数正负和定积分结合证明不等式问题总结...
  2. 升级版记事本 Notepad++
  3. 科大讯飞智慧医疗再出重磅,“智医助理”机器人顺利通过临床执业医师综合笔试...
  4. C++中引用的一些问题
  5. XML Schema介绍之namespace
  6. Android开源库loopj的android-async-http的 JsonHttpResponseHandler 存在死循环GC_CONCURRENT
  7. Oracle小知识总结
  8. C语言斐波那契的递归函数 Fibonacci
  9. python生成图片链接_python如何将两张图片生成为全景图片
  10. JavaScript中值类型与引用类型
  11. lesson 040 —— 面向对象简介
  12. wallhaven怎么下原图_Wallhaven Top高清壁纸抓取工具
  13. 遍历文件夹进行点云格式转换 PCD转BIN BIN转PCD PCD转TXT TXT转PCD PLY转PCD
  14. 【Codeforces Round #531 (Div. 3) F. Elongated Matrix】状压DP
  15. FATAL: kernel too old
  16. ArrayList的使用方法
  17. 李大勇matlab密码,基于MatlabSimulink的太阳能热水系统仿真研究 沈超.doc
  18. 前端处理后端返回的excel文件流并下载
  19. java将数据写入excel_java将数据写入excel
  20. git常用命令及常见问题

热门文章

  1. 5分绩点转4分_工作复盘|因为这5点,4月份目标没完成
  2. addeventlistener事件参数_Vue的钩子事件和程序化侦听
  3. django models索引_sql – 为什么Django显式地在唯一字段上创建索引
  4. 公文字体字号标准2020_一文了解公文格式规范,图文并茂(建议收藏备用)
  5. 什么牌子的平板电脑好_平板电脑什么牌子好?带你一探年度最佳平板的奥秘
  6. centos7 mysql 安装_CentOS7安装MySQL8.0图文教程(相对最齐全)
  7. uci大学教育转计算机,UCI加州大学尔湾分校计算机科学硕士M.S. Computer Science
  8. 面试项目亮点_码农:面试被问到自己项目亮点时,感觉自己的回答虚伪的不行!...
  9. ctf up怎么写 write_软件测试工程师要不要写工具?
  10. python查找文件是否存在_python脚本查找文件是否存在的方法