位图索引基本概念

位图索引是一种很高效的索引结构,对于多属性过滤的聚合查询很高效,玩的就是 bit。

位图:位(bit)的一个简单数组,比如 001010,这个位数就是 6。

位图索引:假如建立在一个表的列 A 上,对属性 A 中的每一个可能取值都建立位图,位图的位数和数据量相等。

位图的生成方法:如果编号为 i 的记录在属性 A 上的值为 v_j,则 v_j 位图的第 i 位为1,否则为0。

实际例子

我们为性别字段建立位图索引,性别有 3 种取值,分别建立位图索引。

《性别_男》= 100100。表示第 1 个和第 4 个是男,其他不是男,后边类似。

《性别_女》= 011010。

《性别_中性》= 000001。

相同的,对收入也建立位图索引:

《收入_1w》= 101010。

《收入_2w》= 010101。

用法

单属性过滤原始数据查询:单个属性满足条件的原始数据,比如查询所有男性。

直接利用《性别_男》位图去找原始数据就可以了。

多属性过滤原始数据查询:多个属性满足条件的原始数据。比如查询性别为男且收入为1w的记录:

这时就可以将《性别_男》和《收入_1w》两个位图进行 and 操作:

100100 and 101010 = 100000

结果显示只有第一条记录满足条件。

多属性过滤聚合查询:多个属性满足条件的记录聚合值。比如查询男性收入 1w 的人数。

将两个位图进行 and 操作后直接统计 1 的个数,避免了原始数据查询,这是位图索引最快的查询。

实现方式

简单版:用 for 循环来操作两个位图,一个一个位计算。

升级版:用 int 或者 long 来表示位图,直接对 int 或 long 进行 and 操作。

比如 java 中:9 & 10 = 8(1001 & 1010 = 1000)。这样可以一次计算 32 位或者 64 位。

一些约束

位图索引适合枚举类型的取值,连续变化的需要分段离散化才能使用位图。

不知道大家注意到没有,为啥我在性别中加了个中性?因为 bit 有 0/1 两种取值,如果属性也只有两种取值的话,就不需要对每一种取值建立一个位图了,用一个位图就够了,另一个取值将位图取反就可以得到。比如去掉中性,那么《性别_男》= 1000,《性别_女》= 0111。

当删除一个男性记录,可以将《性别_男》中对应位置 0。但是这样取反后就会多出一个女性记录。因此最好还是对属性的每个取值建立位图。

总结

可以在枚举类型的属性上建立位图索引,为属性的每个取值建立一个位图。从而大幅度加速多属性过滤的普通查询和聚合查询。

浅析位图索引(bitmap index)相关推荐

  1. Oracle创建索引bitmap,Oracle编程高手箴言:位图索引(Bitmap Index)的故事

    Oracle编程高手箴言:位图索引(Bitmap Index)的故事 您如果熟悉Oracle数据库,我想您对Thomas Kyte的大名一定不会陌生.Tomas主持的asktom.oracle.com ...

  2. mysql bitmap位图索引_Oracle位图索引(Bitmap Index)

    欢迎进入Oracle社区论坛,与200万技术人员互动交流 >>进入 位图(bitmap)索引是另外一种索引类型,它的组织形式与B树索引相同,也是一棵平衡树.与B树索引的区别在于叶子节点里存 ...

  3. 位图索引bitmap(一):基本概念

    1 基本概念 位图索引(bitmap index)技术是一类特殊的数据库索引技术,其索引使用bit数组(或称bitmap.bit set.bit string.bit vector)进行存储与计算操作 ...

  4. 位图索引Bitmap indexes(数据库索引)

    位图索引是一种使用位图的特殊数据库索引.主要针对大量相同值的列而创建,比如(性别.婚配等字段可选值很少的字段创建位图索引): oracle 位图索引(bitmap index)_ITPUB博客 详解o ...

  5. 数据库常见面试题 —— 6. 浅析聚集索引 Clustered Index

    聚集索引决定了数据的物理顺序,一张表只有一个聚集索引 索引是与表或视图关联的磁盘上结构可以加快检索行的速度 聚集索引和数据在物理上是按顺序排列在数据页上的,索引和数据在物理上都是顺序连续,一旦找到第一 ...

  6. oracle 分组排序后取第一条_关于oracle中位图索引的探讨:概念、原理、优缺点...

    概述 oracle索引主要分为以下几种: 1. b-tree索引 Oracle数据库中最常见的索引类型是b-tree索引,也就是B-树索引,以其同名的计算科学结构命名.CREATE INDEX语句时, ...

  7. 【Bitmap Index】B-Tree索引与Bitmap位图索引的锁代价比较研究

    通过以下实验,来验证Bitmap位图索引较之普通的B-Tree索引锁的"高昂代价".位图索引会带来"位图段级锁",实际使用过程一定要充分了解不同索引带来的锁代价 ...

  8. 位图索引(bitmap index)冲突引起的TX锁争用

    B*Tree索引的叶节点以排序形式存储索引条目,每个索引条目指向各自的一个rowid.所以唯一键冲突之外,索引条目之间不发生争用.而位图索引的叶节点具有 "column值+start row ...

  9. mysql bitmap index_位图索引:原理(BitMap index)

    位图(BitMap)索引 前段时间听同事分享,偶尔讲起Oracle数据库的位图索引,顿时大感兴趣.说来惭愧,在这之前对位图索引一无所知,因此趁此机会写篇博文介绍下位图索引. 1. 案例 有张表名为ta ...

最新文章

  1. JS文件中加载jquery.js(JS文件添加其他JS文件)
  2. HTTP协议---HTTP请求中的常用请求字段和HTTP的响应状态码及响应头
  3. python处理excel表格数据-利用Python处理和分析Excel表中数据实战.doc
  4. 怎样在android平台上使用第三方jar包
  5. JVM内存管理------杂谈(借此也论一论obj=null)
  6. 计算机基础应用形考5access答案,计算机应用基础形考作业五答案.doc
  7. [渝粤教育] 中国地质大学 金融保险业会计 复习题
  8. 得到python默认的帮助文档
  9. java biginteger使用_在Java中使用BigInteger值
  10. VS2010+OpenCV2.4.6永久性配置方法
  11. PyQt5 UI设计时自动创建qrc文件
  12. 小米路由器r2d_小米路由器二代R2D怎样设置无线中继模式
  13. 26. 简述队列和栈的异同
  14. html调用ckplayer说明,CKplayer功能配置(示例代码)
  15. 在天堂与地狱之间——清华浪子梦断中关村 (转)
  16. android长按呼出菜单,Android系统下长按菜单的实现方式
  17. web服务之Nginx中的location匹配与rewrite重写跳转
  18. 半导体设备英文缩写_半导体设备进口 晶圆制造中光刻机进口要格外注意这个问题...
  19. 智能驾驶 车牌检测和识别(二)《YOLOv5实现车牌检测(含车牌检测数据集和训练代码)》
  20. 你需要启用steam社区界面功能以进行购买_Steam新功能正式上线!游戏库更加酷炫,玩家终于能白嫖了?...

热门文章

  1. maven项目排除/屏蔽parent的plugin
  2. python raise异常处理
  3. php $mail = new phpmailer();,PHP 利用QQ郵箱發送郵件「PHPMailer」
  4. 什么是ActionBar,详细讲解
  5. oracle占多大表空间,oracle查询表空间大小以及每个表所占空间的大小
  6. Bloomber 新建基金账户步骤
  7. 爬虫Scrapy框架初体验
  8. java 开源 server_simplewebserver: SimpleWebServer 是一款使用Java基于NIO编写的超轻量级开源Web Application Server...
  9. bilibili登录页面代码html5,GitHub - Attect/Bilibili-HTML5-Random-Play: 基于TamperMonkey的B站网页端随机播放功能插件...
  10. mysql 远程load data_mysql导入数据load data infile用法整理