如何设计一个高性能积分系统

功能说明

1:用户签到可以获得积分,需要按照用户维度每天进行用户总积分排行榜

2:需要近实时更新排行榜

3:在积分相同的情况下,需要按照先注册的用户排在前面

4:用户量100w

5:排行前20名称

6:实现积分新增,扣减,过期等能力。

7:优先使用即将过期的积分

排行榜设计

1:排行榜的实现可以借助redis的SortedSet数据结构实现排行榜,sortedSet可以按照我们给的score进行排序,

但是SortedSet的性能会随着元素的数量急剧下降。这里每次写入新的移除旧的数据,保证排行的数量在100个

2:用户每次签到都去更新排行榜,可能导致redis 的压力很大。这边先将积分产生变动的记录到一个redis的list结构中

(数量多也可以考虑分片),然后用定时任务每分从redis中捞出积分变更的用户ID,然后再冲数据库中获取用户的积分账户的总积分。这样查询数据库就是走索引的点查了,性能旧很高,而且可以去重再一分钟内用户ID,降低重复刷新排行榜

3:但是SortedSet 再score 相同的情况下,是按照member的字典序排列,用户id是按照注册时间增加的,按照字典序的话id越大就再前面。

这个不符合要求。

然后采取方法,用最大ID减去用户ID,作为member,去排序。

4:查询排行榜直接可以再redis 中获取

流程图如下

积分处理的问题

如何处理积分增加和扣减顺序问题

特殊场景:用户A,获得10积分,然后马上进行消费积分10积分。但是我们对于积分明细记录是异步进行。可能出现先消费兑换积分的消息,然而用户获取积分的消息还没消费到,从而导致消费不成功。

如何处理这个问题

如果保证同一个用户的消费积分变化的消息是顺序的。那么用户新增积分必然先消费处理,这样就可以规避这个问题。

这里利用了RocketMq在同一个queue中的消息消费是顺序的特性来处理这个问题,逻辑如下

将用户的userId取模选择queue,同一个用户消息发送到同一个queue,这样保证顺序了

如何处理积分过期的问题

过期积分采用定时任务,扫描过期积分,然后通过userId进行取模,发送mq,然后消费过期积分明细,更新积分账户表的总额

特殊场景

用户有10积分在15日过期,定时任务15日凌晨进行扫描过期,但是还没有更新到用户积分账户表。恰好这个时候用户进行了积分兑换,总表存在这10积分的,导致用户兑换成功,积分详情消费积分兑换消息进行积分明细扣减的时候不存在这笔10积分明细来扣减了,导致扣减失败。

解决方案

我设计采用乐观锁机制处理,当积分过期时候,先查询该用户积分账户表积分总额,然后过期,当更新总表积分时候用开始查询的积分总额作为乐观锁,

当更新条数未0,说明这个时候用户积分有变更,并不是过期时候积分状态了。这个时候优先用户积分消费,然后将积分过期过期消息重新投递延迟5min的mq消息。

其他设计

数据库表结构设计,其他技术细节比如消息幂等,消息发送保证成功等技术细节这边就略过,如果大家有其他需求实现难点,大家可以留言讨论!

如何设计一个高性能积分系统相关推荐

  1. 如何设计一个高性能短链系统?

    目录 前言 短链有啥好处,用长链不香吗 短链跳转的基本原理 短链生成的几种方法 1.哈希算法 如何缩短域名 如何解决哈希冲突的问题? 2.自增序列算法 高性能短链的架构设计 总结 前言 今天,我们来谈 ...

  2. 设计 一个高性能爬虫系统

    资料来源 http://www.xuebuyuan.com/1296711.html 开源中国 http://my.oschina.net/eshijia/blog/136595 最近看了一篇来自纽约 ...

  3. 系统设计——如何设计一个高性能的短链接系统?

    短链系统设计看起来很简单,但如何设计一个高性能短链系统呢,这也是面试中非常常见的一道设计题. 首先,为什么要用短链? 短链跳转的基本原理是什么? 短链生成的几种方法你知道吗? 高性能短链的架构如何设计 ...

  4. 如何设计一个高性能的秒杀系统

    秒杀系统要如何架构,在做技术方案时要注意哪些问题,搞了个秒杀专辑,专门收集秒杀系列文章. 当你去一家公司面试时,很多面试官都会问你如何设计一个高性能秒杀系统.秒杀涉及的技术域从客户端.浏览器.网络.负 ...

  5. 面试题:如何设计一个高并发系统?

    面试官心理分析 说实话,如果面试官问你这个题目,那么你必须要使出全身吃奶劲了.为啥?因为你没看到现在很多公司招聘的 JD 里都是说啥,有高并发就经验者优先. 如果你确实有真才实学,在互联网公司里干过高 ...

  6. 【面试】如何设计一个高并发系统

    一.为什么需要秒杀系统? 电商平台本质是在线上撮合买卖双方的购销需求,达成交易.虽然是线上交易,但也遵守朴素的经济学原理,供求关系决定了商品的经济活动.当供求平衡时,买方和卖方处于对等关系,双方相对稳 ...

  7. 小米的开源监控系统open-falcon架构设计,看完明白如何设计一个好的系统

    小米的开源监控系统open-falcon架构设计,看完明白如何设计一个好的系统 小米的http://book.open-falcon.org/zh/intro/ 早期,一直在用zabbix,不过随着业 ...

  8. mysql每秒支持多少并发_如何设计一个高并发系统?

    面试题 如何设计一个高并发系统? 面试官心理分析 说实话,如果面试官问你这个题目,那么你必须要使出全身吃奶劲了.为啥?因为你没看到现在很多公司招聘的 JD 里都是说啥,有高并发就经验者优先. 如果你确 ...

  9. oom 如何避免 高并发_【面试题】如何设计一个高并发系统?

    面试题 如何设计一个高并发系统? 原文链接:https://github.com/doocs/advanced-java/blob/master/docs/high-concurrency/high- ...

最新文章

  1. 什麽样的资料集不适合用深度学习?
  2. hadoop之MapReduce框架TaskTracker端心跳机制分析(源码分析第六篇)
  3. python 实现函数的递归
  4. Oracle 存储过程,函数和包。
  5. Activiti数据库
  6. 数学建模 TSP(旅行商问题) Lingo求解
  7. apache开源项目--Apache Commons Imaging
  8. 重构 阅读心得(转)
  9. linus系统安装mysql_linux安装MYSQL
  10. 牛腩新闻发布系统总结
  11. 【老生谈算法】matlab人脸识别算法(PCA)——人脸识别
  12. (二十一)美萍酒店管理系统:系统维护_系统设置_房间类型_房间费打折
  13. Lua学习(一):luac、luajit编译与反编译
  14. 1、ABP 文档介绍
  15. Python爬取百度文库并存储为word文档
  16. A005-软件结构-从前后台到调度器
  17. 【C语言:精准打击】scanf_s()函数与scanf()函数的相关解决方案
  18. VSC 注册右键菜单
  19. Python实现计算圆周率π的值到任意位的方法示例
  20. 初学素描需要准备的工具有哪些?新手必看!

热门文章

  1. java编程基础-零基础学java-极客时间
  2. 基于YOLOv5的疲劳驾驶检测系统(Python+清新界面+数据集)
  3. [ 转]Linux下推荐的常用应用程序列表
  4. winpython,安装与使用(anaconda)
  5. 花样流水灯1:查表显示LED灯(原理图+程序+仿真)
  6. 报名突破1000人!【UBDC全域大数据峰会·2016】就等你了!
  7. java并发编程的艺术和并发编程这一篇就够了
  8. 2021年了,自媒体还能做么?还能赚钱吗?
  9. 实验五 贝叶斯分类器(模式识别与机器学习)
  10. 错觉-Info:让你难以置信的视错觉