快速理解-数据库索引-Hash以及BitMap
ccwgpt 2025-01-06 11:44 59 浏览 0 评论
Hash结构
根据Hash函数的运算,只需经过一次定位,便能找到需要查询数据所在的桶,不像B+树索引,要从根节点到非叶子节点,再到叶子节点,最后才能访问到我们的数据,这样可能会经过多次的IO访问,所以Hash索引的查询效率理论上要高于B+树索引。
如上这张图,比如说我们要查找Sandra Dee这么一个人,那么根据Hash函数对Key,即Sandra Dee的运算,只需一次,我们便能定位到152号桶,就是这个buckets,之后便将152号的entries全部加载到内存当中,但由于该entries是一个链表,我们顺着John Smith的指针,最终定位到Sandra Dee。
疑问
可能有些人就有疑问了,既然Hash索引的查询效率要比B+树高,为什么我们不用Hash索引作为主流索引呢?任何事务都是有两面性的,Hash索引也一样,虽然Hash索引查询效率高,但是Hash索引本身由于其特殊性也带来了很多限制和弊端。
Hash索引的缺点:
1,仅仅能满足“=”,“IN”,不能使用范围查询。
由于Hash索引比较的是进行Hash运算之后的Hash值,所以呢它只能用于等值的过滤,不能用于基于范围的查询,因为经过相应的Hash算法处理之后的Hash值的大小关系并不能保证和Hash运算前的完全一样,如上图,我们的Sandra Dee和John Smith就取了相同的Hash值了。
2,无法被用来避免数据的排序操作。
由于Hash索引中存放的是经过Hash运算之后的值,而且Hash值的大小关系并不一定和Hash运算前的键值完全一样,所以数据库无法利用索引的数据来避免任何排序运算。
3,不能利用部分索引键查询。
对于组合索引,Hash索引在计算Hash值的时候,是组合键,就是将组合索引键合并之后再一起进行运算的Hash的值,而不是单独计算Hash值的。所以呢通过组合索引的前面一个或几个索引键进行查询的时候,Hash索引也无法被利用,而B+树是支持利用组合索引中的部分索引的。
4,不能避免表扫描。
Hash索引是将索引键通过Hash运算之后,将运算结果的Hash值和所对应的行指针信息存放在一个bucket当中的,由于不同索引键存在相同的Hash值,所以即使取出满足某个Hash键值的那些数据,也无法从Hash索引中直接完成查询,还是要通过访问bucket中的实际数据进行相应的比较,这就是不能避免表扫描的原因。
5,遇到大量Hash值相等的情况后性能并不一定就会比B树索引高。
对于选择性比较低的索引键,如果创建Hash索引,那么将会存在大量记录指针信息存放于同一个bucket的情况,从而造成整体性能非常低下。就跟我们前面用到的二叉树一样,有可能会变成线性的存储结构,有可能在一种很极端的情况下,所有的键计算出来的Hash值都是一样的,也就是都放在同一个bucket中,那我们查询bucket的最后一条数据的时候,就会变成线性的了,所以这也是Hash索引不能成为主流索引的原因,因为它比较的不稳定。
BitMap——位图索引
当表中的某个字段只有几种值得时候,就比如我们要表示性别的时候,只有男女两种情况,如果仅仅是为了在这个字段上实现高效的统计,此时用位图索引是一个最佳选择了。不过很少有数据库支持位图索引,比较主流的是Oracle。
位图索引的结构类似于B+树,B+树用来定位叶子节点,这些节点包含指定键值的位图段,位图段就位于叶子节点上,它的段信息就是下面的那些数字。
由于数据的值总类固定,像这里只有Blue,Green,Red,Yellow四种,所以在存储方式上,会先按照状态值进行分开,然后每一种值的空间会存储每个实际的数据行是否是这个值,我们可以看到这里有0101这样的位图,比如第一行是Blue,我们就用1来表示,第二行不是就用0来表示。在这种情况下,由于只需要存储“是”与“否”,所以通常只需要一个bit位来存放,因此理论上一个叶子块,可以存放非常多的bit位,来表示不同的行,因此用它来统计时是非常快的,加载到内存中之后,几乎是存cpu的叠加操作。
那位图索引固然好,但是它只适用于某个字段的值只有固定的几种情况,同时需要注意的是,位图索引有一个很大的缺陷,就是它的锁的力度非常大。当尝试新增或修改一条数据的时候,通常与它在同一个位图的数据操作都会被锁住,因为某行所在的位置顺序有可能会因为数据的添加或删除而发生改变,所以它并不适合高并发的联机事务处理系统,即咱们常见的OLTP系统,而适合于并发较少,而统计运算较多的OLAP(联机分析处理)类系统。
相关推荐
- 一个基于.Net Core遵循Clean Architecture原则开源架构
-
今天给大家推荐一个遵循CleanArchitecture原则开源架构。项目简介这是基于Asp.netCore6开发的,遵循CleanArchitecture原则,可以高效、快速地构建基于Ra...
- AI写代码翻车无数次,我发现只要提前做好这3步,bug立减80%
-
写十万行全是bug之后终于找到方法了开发"提示词管理助手"新版本那会儿,我差点被bug整崩溃。刚开始两周,全靠AI改代码架构,结果十万行程序漏洞百出。本来以为AI说没问题就稳了,结果...
- OneCode低代码平台的事件驱动设计:架构解析与实践
-
引言:低代码平台的事件驱动范式在现代软件开发中,事件驱动架构(EDA)已成为构建灵活、松耦合系统的核心范式。OneCode低代码平台通过创新性的注解驱动设计,将事件驱动理念深度融入平台架构,实现了业务...
- 国内大厂AI插件评测:根据UI图生成Vue前端代码
-
在IDEA中安装大厂的AI插件,打开ruoyi增强项目:yudao-ui-admin-vue31.CodeBuddy插件登录腾讯的CodeBuddy后,大模型选择deepseek-v3,输入提示语:...
- AI+低代码技术揭秘(二):核心架构
-
本文档介绍了为VTJ低代码平台提供支持的基本架构组件,包括Engine编排层、Provider服务系统、数据模型和代码生成管道。有关UI组件库和widget系统的信息,请参阅UI...
- GitDiagram用AI把代码库变成可视化架构图
-
这是一个名为gitdiagram的开源工具,可将GitHub仓库实时转换为交互式架构图,帮助开发者快速理解代码结构。核心功能一键可视化:替换GitHubURL中的"hub...
- 30天自制操作系统:第六天:代码架构整理与中断处理
-
1.拆开bootpack.c文件。根据设计模式将对应的功能封装成独立的文件。2.初始化pic:pic(可编程中断控制器):在设计上,cpu单独只能处理一个中断。而pic是将8个中断信号集合成一个中断...
- AI写代码越帮越忙?2025年研究揭露惊人真相
-
近年来,AI工具如雨后春笋般涌现,许多人开始幻想程序员的未来就是“对着AI说几句话”,就能轻松写出完美的代码。然而,2025年的一项最新研究却颠覆了这一期待,揭示了一个令人意外的结果。研究邀请了16位...
- 一键理解开源项目:两个自动生成GitHub代码架构图与说明书工具
-
一、GitDiagram可以一键生成github代码仓库的架构图如果想要可视化github开源项目:https://github.com/luler/reflex_ai_fast,也可以直接把域名替换...
- 5分钟掌握 c# 网络通讯架构及代码示例
-
以下是C#网络通讯架构的核心要点及代码示例,按协议类型分类整理:一、TCP协议(可靠连接)1.同步通信//服务器端usingSystem.Net.Sockets;usingTcpListene...
- 从复杂到优雅:用建造者和责任链重塑代码架构
-
引用设计模式是软件开发中的重要工具,它为解决常见问题提供了标准化的解决方案,提高了代码的可维护性和可扩展性,提升了开发效率,促进了团队协作,提高了软件质量,并帮助开发者更好地适应需求变化。通过学习和应...
- 低代码开发当道,我还需要学习LangChain这些框架吗?| IT杂谈
-
专注LLM深度应用,关注我不迷路前两天有位兄弟问了个问题:当然我很能理解这位朋友的担忧:期望效率最大化,时间用在刀刃上,“不要重新发明轮子”嘛。铺天盖地的AI信息轰炸与概念炒作,很容易让人浮躁与迷茫。...
- 框架设计并不是简单粗暴地写代码,而是要先弄清逻辑
-
3.框架设计3.框架设计本节我们要开发一个UI框架,底层以白鹭引擎为例。框架设计的第一步并不是直接撸代码,而是先想清楚设计思想,抽象。一个一个的UI窗口是独立的吗?不是的,...
- 大佬用 Avalonia 框架开发的 C# 代码 IDE
-
AvalonStudioAvalonStudio是一个开源的跨平台的开发编辑器(IDE),AvalonStudio的目标是成为一个功能齐全,并且可以让开发者快速使用的IDE,提高开发的生产力。A...
- 轻量级框架Lagent 仅需20行代码即可构建自己的智能代理
-
站长之家(ChinaZ.com)8月30日消息:Lagent是一个专注于基于LLM模型的代理开发的轻量级框架。它的设计旨在简化和提高这种模型下代理的开发效率。LLM模型是一种强大的工具,可以...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 框架图 (58)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- springmvc框架 (49)
- 分布式事务框架 (65)
- scrapy框架 (56)
- shiro框架 (61)
- 定时任务框架 (56)
- java日志框架 (61)
- mfc框架 (52)
- abb框架断路器 (48)
- beego框架 (52)
- java框架spring (58)
- grpc框架 (65)
- tornado框架 (48)
- 前端框架bootstrap (54)
- orm框架有哪些 (51)
- 知识框架图 (52)
- ppt框架 (55)
- 框架图模板 (59)
- 内联框架 (52)
- cad怎么画框架 (58)
- ssm框架实现登录注册 (49)
- oracle字符串长度 (48)