https://segmentfault.com/a/1190000008188655

BitMap是什么

就是通过一个bit位来表示某个元素对应的值或者状态,其中的key就是对应元素本身。我们知道8个bit可以组成一个Byte,所以bitmap本身会极大的节省储存空间。

Redis中的BitMap

Redis从2.2.0版本开始新增了setbit,getbit,bitcount等几个bitmap相关命令。虽然是新命令,但是并没有新增新的数据类型,因为setbit等命令只不过是在set上的扩展。

setbit命令介绍

指令 SETBIT key offset value
复杂度 O(1)
设置或者清空key的value(字符串)在offset处的bit值(只能只0或者1)。

空间占用、以及第一次分配空间需要的时间

在一台2010MacBook Pro上,offset为2^32-1(分配512MB)需要~300ms,offset为2^30-1(分配128MB)需要~80ms,offset为2^28-1(分配32MB)需要~30ms,offset为2^26-1(分配8MB)需要8ms。<来自官方文档>
大概的空间占用计算公式是:($offset/8/1024/1024)MB

使用场景一:用户签到

很多网站都提供了签到功能(这里不考虑数据落地事宜),并且需要展示最近一个月的签到情况,如果使用bitmap我们怎么做?一言不合亮代码!

<?php
$redis = new Redis();
$redis->connect('127.0.0.1');//用户uid
$uid = 1; //记录有uid的key $cacheKey = sprintf("sign_%d", $uid); //开始有签到功能的日期 $startDate = '2017-01-01'; //今天的日期 $todayDate = '2017-01-21'; //计算offset $startTime = strtotime($startDate); $todayTime = strtotime($todayDate); $offset = floor(($todayTime - $startTime) / 86400); echo "今天是第{$offset}天" . PHP_EOL; //签到 //一年一个用户会占用多少空间呢?大约365/8=45.625个字节,好小,有木有被惊呆? $redis->setBit($cacheKey, $offset, 1); //查询签到情况 $bitStatus = $redis->getBit($cacheKey, $offset); echo 1 == $bitStatus ? '今天已经签到啦' : '还没有签到呢'; echo PHP_EOL; //计算总签到次数 echo $redis->bitCount($cacheKey) . PHP_EOL; /** * 计算某段时间内的签到次数 * 很不幸啊,bitCount虽然提供了start和end参数,但是这个说的是字符串的位置,而不是对应"位"的位置 * 幸运的是我们可以通过get命令将value取出来,自己解析。并且这个value不会太大,上面计算过一年一个用户只需要45个字节 * 给我们的网站定一个小目标,运行30年,那么一共需要1.31KB(就问你屌不屌?) */ //这是个错误的计算方式 echo $redis->bitCount($cacheKey, 0, 20) . PHP_EOL; 

使用场景二:统计活跃用户

使用时间作为cacheKey,然后用户ID为offset,如果当日活跃过就设置为1
那么我该如果计算某几天/月/年的活跃用户呢(暂且约定,统计时间内只有有一天在线就称为活跃),有请下一个redis的命令
命令 BITOP operation destkey key [key ...]
说明:对一个或多个保存二进制位的字符串 key 进行位元操作,并将结果保存到 destkey 上。
说明:BITOP 命令支持 AND 、 OR 、 NOT 、 XOR 这四种操作中的任意一种参数

//日期对应的活跃用户$data = array(

'2017-01-10' => array(1,2,3,4,5,6,7,8,9,10),
 '2017-01-11' => array(1,2,3,4,5,6,7,8),
 '2017-01-12' => array(1,2,3,4,5,6),
 '2017-01-13' => array(1,2,3,4),
 '2017-01-14' => array(1,2)
 );
 
//批量设置活跃状态
 foreach($data as $date=>$uids) {
 $cacheKey = sprintf("stat_%s", $date);
 foreach($uids as $uid) {
 $redis->setBit($cacheKey, $uid, 1);
 } 
} 

$redis->bitOp('AND', 'stat', 'stat_2017-01-10', 'stat_2017-01-11', 'stat_2017-01-12') . PHP_EOL;
 //总活跃用户:6
 echo "总活跃用户:" . $redis->bitCount('stat') . PHP_EOL;

 $redis->bitOp('AND', 'stat1', 'stat_2017-01-10', 'stat_2017-01-11', 'stat_2017-01-14') . PHP_EOL;
 //总活跃用户:2
 echo "总活跃用户:" . $redis->bitCount('stat1') . PHP_EOL; 

$redis->bitOp('AND', 'stat2', 'stat_2017-01-10', 'stat_2017-01-11') . PHP_EOL;
 //总活跃用户:8
 echo "总活跃用户:" . $redis->bitCount('stat2') . PHP_EOL;

假设当前站点有5000W用户,那么一天的数据大约为50000000/8/1024/1024=6MB

使用场景三:用户在线状态

前段时间开发一个项目,对方给我提供了一个查询当前用户是否在线的接口。不了解对方是怎么做的,自己考虑了一下,使用bitmap是一个节约空间效率又高的一种方法,只需要一个key,然后用户ID为offset,如果在线就设置为1,不在线就设置为0,和上面的场景一样,5000W用户只需要6MB的空间。

//批量设置在线状态
$uids = range(1, 500000);

foreach($uids as $uid) {
 $redis->setBit('online', $uid, $uid % 2); 
}
 //一个一个获取状态 
$uids = range(1, 500000);
 $startTime = microtime(true);
 foreach($uids as $uid) {
 echo $redis->getBit('online', $uid) . PHP_EOL; 
} 
$endTime = microtime(true);
 //在我的电脑上,获取50W个用户的状态需要25秒
 echo "total:" . ($endTime - $startTime) . "s"; 


/**
 * 对于批量的获取,上面是一种效率低的办法,实际可以通过get获取到value,然后自己计算
 * 具体计算方法改天再写吧,之前写的代码找不见了。。。
 */

其实BitMap可以运用的场景很多很多(当然也会受到一些限制),思维可以继续扩散~欢迎小伙伴给我留言探讨~

转载于:https://www.cnblogs.com/davidwang456/articles/9362203.html

Redis中bitmap的妙用 1相关推荐

  1. Redis中bitmap的妙用

    在Redis中我们经常用到set,get等命令,细心的你有没有发现,还有几个相似的命令叫setbit,getbit,它们是用来干嘛的? BitMap是什么 就是通过一个bit位来表示某个元素对应的值或 ...

  2. redis 中一个字段 修改map_Redis中bitmap的妙用

    在Redis中我们经常用到set,get等命令,细心的你有没有发现,还有几个相似的命令叫setbit,getbit,它们是用来干嘛的? BitMap是什么 就是通过一个bit位来表示某个元素对应的值或 ...

  3. mysql bitmap redis_Redis中bitmap的妙用

    在Redis中我们经常用到set,get等命令,细心的你有没有发现,还有几个相似的命令叫setbit,getbit,它们是用来干嘛的? BitMap是什么 就是通过一个bit位来表示某个元素对应的值或 ...

  4. Redis 中 BitMap 的使用场景

    BitMap# BitMap 原本的含义是用一个比特位来映射某个元素的状态.由于一个比特位只能表示 0 和 1 两种状态,所以 BitMap 能映射的状态有限,但是使用比特位的优势是能大量的节省内存空 ...

  5. Redis 中 bitmap 的原理和使用

    原理 先声明一下:Redis 有5种数据类型,而 BitMap 在 Redis 中并不是一个新的数据类型,其底层是 Redis 实现. 通常情况下,我们在 redis 中存储一个字符串,如:" ...

  6. 一看就懂系列之 详解redis的bitmap在亿级项目中的应用

    前言 这是一篇拖了很久的总结,项目中引入了redis的bitmap的用法,感觉挺高大上的,刨根问底,故留下总结一篇当作纪念. 说清楚几个问题: 1.bitmap的原理.用法. 2.bitmap的优势. ...

  7. Redis中布隆过滤器的使用及原理

    <玩转Redis>系列文章主要讲述Redis的基础及中高级应用.本文是<玩转Redis>系列第[11]篇,最新系列文章请前往公众号"zxiaofan"查看, ...

  8. redis 的bitmap 开源包 bitmapist的应用

    2019独角兽企业重金招聘Python工程师标准>>> 原理:http://my.oschina.net/u/1458120/blog/545224 bitmap包:https:// ...

  9. bitmap 转byte[]后读取_闲谈redis的bitmap

    bitmap的原理 bitmap就是通过最小的单位bit(8bit = 1b = 0.001kb)来进行0或者1的设置,表示某个元素对应的值或者状态.一个bit的值,或者是0,或者是1:也就是说一个b ...

最新文章

  1. 04.微博消息的语言检测
  2. 分布式Ehcache Terracotta使用
  3. debian6 xen4.0安装 guest半虚拟化--tar安装
  4. halcon知识:select_shape究竟怎么用(1)?
  5. Jquery 点击当前的标签对象获取值 与JS整理
  6. zabbix中mysql连不上的排错_zabbix 安装及简单排错
  7. java 1.6u29 下载_jdk1.6 64位下载|JDK 6(Java SE Development Kit)下载6u43 64位官方版_java运行环境 IT猫扑网...
  8. c语言水仙花数(输入判断),用c语言判断一个数是否为水仙花数?
  9. PCB走线载流能力-揭秘一
  10. 信息熵 条件熵 信息增益 信息增益比 GINI系数
  11. windows下安装VM虚拟机和Ubuntu系统(附注册密钥)
  12. Go语言学习之go环境搭建
  13. 对Python的深度学习库Theano的介绍
  14. 单片机实现TM1620驱动 含完整程序源码
  15. 玩转Qt(14)-Qt与Web混合开发
  16. 副总和副总裁的区别_总经理与副总经理的巨大区别
  17. 2020哔哩哔哩大数据面试题整理
  18. MySQL复制 slave_exec_mode 参数IDEMPOTENT 说明
  19. XtraReport 填补空白行,生成空白行
  20. 高德地图WEB端软件应用

热门文章

  1. ios php 推送测试工具,IOS PushNotification - IOS推送测试 PHP 版
  2. ubuntu 12.04 交叉编译 arm/mips 平台的 strace
  3. python struct pack解析_python struct pack
  4. oracle同义词truncate,详解Oracle DELETE和TRUNCATE 的区别
  5. opencv画框返回坐标 python_python opencv鼠标事件实现画框圈定目标获取坐标信息
  6. pandas isnull 函数
  7. Java读取文件流用什么对象_使用Java IO流实现对文本文件的读写过程中,通常需要处理下列( )异常。_学小易找答案...
  8. 马云谈计算机技术发展趋势,马云谈创业:靠的不是技术而是观念
  9. win10怎么用Linux命令,教你Windows10系统使用Linux命令的技巧
  10. python羊车门问题_羊车门问题的python模拟和解释