MySQL索引,你真的学会了?索引底层原理是什么?索引什么时候失效,你知道吗?

目录

1、什么是索引

2、索引分类

3、索引的基本操作

3.1、主键索引

3.2、单列索引

3.3、唯一索引

3.4、复合索引

4、索引的底层原理

        为什么使用B+Tree而不是B-Tree?

如果数据量特别大的情况下,B+Tree会不会深度太深影响查询效率?

5、聚簇索引和非聚簇索引

5.1、概念:

5.2、使用聚簇索引的优势

5.3、聚簇索引需要注意什么

5.4、为什么通常建议使用自增id

6、索引失效的常见场景


 

1、什么是索引

1.1、索引定义 

        索引是一种帮助MySQL提高查询效率的数据结构

1.2、索引的优点

        加快数据查询的速度

1.3、索引的缺点

  1. 维护索引需要耗费数据库资源
  2. 索引需要占用磁盘空间
  3. 当对表的数据进行增删改时,因为要维护索引,速度会受到影响

2、索引分类

  1. 主键索引:设定为主键后数据库会自动建立索引,innodb为聚簇索引
  2. 单值索引:一个索引只包含一个列,一个表可以有多个单列索引
  3. 唯一索引:索引列的值必须唯一,但允许有空值
  4. 复合索引:一个索引包含多个列

3、索引的基本操作

3.1、主键索引

建表,把id设置为主键:

e52f18f4b5b64eb0b52f8568a7aacafd.png

查看索引:

868e742d2eaa4f42b27fb343cbdd352a.png

可以看到,我们没有设置索引,但数据库已经自动帮我们把主键设置为索引了~

3.2、单列索引

建表,把age设置为单列索引:

aacfc8d2636848ffb16f7c6ade051e8e.png

        通过上述,我们可以观察到,主键被数据库自动设置为索引,单列索引可以和主键索引同时存在~

3.3、唯一索引

建表,把name设置为唯一索引:

5f44443cf63849feb6142e3b8b1c9f4e.png

唯一索引和主键索引的区别:

8b61fa5ecf17427ba646b3ab05a4a45f.png

主键索引的值不能为空,而唯一索引的值可以为空(我在MySQL5.7版本上是支持多个数据为空的的)~

3.4、复合索引

建表,把name和age设置为复合索引:

57e3cdb206544c40b84aabe3290299f4.png

复合索引底层如何存储的,我们先来看看索引的底层原理:


4、索引的底层原理

在MySQL中,实际存储数据,是如何存储的呢?

如下:

476b45629089496bbee4bcb4a927b4e5.png

看上图,我们会知道存储数据时,是按照三部分存储的,一个是主键索引,一个是数据部分,一个是指针。那么指针指向哪里呢?指针是指向下一个节点的:

6f2ea8d027064518bd25eea5b5d848a5.png

        数据就是这样组织起来的。有一个点需要注意的是,MySQL索引底层的数据是按照主键进行有序放置的,也就是说,数据是按照主键索引进行有序存储的。那么问题来了,当我们存入的数据特多时,我们是需要把数据全部遍历一遍吗?这样的话,时间复杂度是不是有点太大了,如果有一万个数据,运气不好的话,找数据不是得找一万次?

        那根据我们上述所说的数据是按照主键有序存储的,那我们就可以对底层数据存储进行优化,把数据划分成一个个的区域,例如下面的3个数据一划分:

af3da16e87dc425eb51291f6cdfde14e.png

       

        划分后,我们就可以把每个区域看成是一页页的数据(MySQL中,每一页默认是规定存储16KB的数据),我们就可以给每一页数据一个目录,如下:

2bbddb8075854ba3be991a2c0859c07a.png

        观察上图,我们就可以得知,目录中的数据其实就是每一页的数据的第一个数据~

        细心的小伙伴会发现,目录中存储的数据,并不是完整的数据,而是只存放了一个数据的主键和指针~

        如果说,如果数据量非常非常大,目录这个区域也已经超过了16KB的数据怎么办,是不是需要我们再给目录再提一层目录呢~如下:

0f44f621d8c7493897b52d43c50d1699.png

        此时,看到这里学习过数据结构的小伙伴就会知道,这个不就是B+树吗?对的,MySQL索引就是采用了B+的数据结构。

        B+Tree是在B-Tree基础上的一种优化,使其更适合实现外存储索引结构,InnoDB存储引擎(Mysql的默认引擎就是InnoDB)就是用B+Tree实现其索引结构。

        为什么使用B+Tree而不是B-Tree?

  1. B+Tree的非叶子节点只存储键值信息,而B-Tree是存储所有数据(每一页的存储空间是有限的,如果非叶子节点也存储数据,会导致每个节点能存储的key的数量变少;当存储的数据量很大时,会导致T-Tree的深度变大,增加查询时的磁盘I/O次数,进而影响查询效率;而B+Tree就能很好的解决这些问题)
  2. B+Tree所有叶子结点之间都有一个链指针,B-Tree没有
  3. B+Tree数据记录都存放在叶子结点中

如果数据量特别大的情况下,B+Tree会不会深度太深影响查询效率?

        不会哦~B+Tree的高度一般都是在2~4层,而MySQL的InnoDB存储引擎在设计时,是将根节点常驻内存的,也就是说,查找某一键值的行记录时最多只需要1~3次磁盘I/O操作~

        为什么B+Tree的高度一般都是在2~4层?

我们可以来算一算一页能存放多少数据:

        假设是我们刚才的数据的表,有一个id,一个name,一个age。id是int类型,4个字节(数据量大时,需要使用bigInt,8个字节);name假设是设置20字节;age为int类型,4个字节;一个指针,8个字节;一共一条数据36字节。

1KB=1024字节;一页可以存16KB,16*1024/28约等于455条数据。

当我们的B+Tree的高度为2时,也就是说有一层目录,我们来算算能存多少数据:

        目录中,只存放id和指针,一共12个字节,一页能存放数据个数:16*1024/12约等于1365个数据。那么1365的数据就对应1365页叶子节点的数据,约等于对应621226条数据。

        当B+Tree的高度为3时,大家可以自己算算,能存的数据量其实是非常大的,因此一般B+Tree的高度都是在2~4层的~


5、聚簇索引和非聚簇索引

5.1、概念:

  • 聚簇索引:将数据存储与索引放到一块,索引结构的叶子结点保存了行数据
  • 非聚簇索引:将数据与索引分开存储,索引结构的叶子结点指向了数据对应的位置。

聚簇索引:

        也就是说,数据库中的所有数据都是放在聚簇索引的叶子结点中的,而其他索引都属于辅助索引(例如:复合索引、前缀索引、唯一索引等),辅助索引叶子结点中存储的不是数据的物理位置,而是主键值,因此,辅助索引访问数据时总是需要二次查找的:

f7bf992a218e4316a2dc2e187e9c72c5.png

说明: 

  1. 我们会看到辅助索引,是以age作为单列索引的,索引这个索引树就是以age大小排序的~
  2. InnoDB使用的是聚簇索引,将主键组织到一B+树中,而行数据就储存在叶子节点上,若使用 where d =4"这样的条件查找主键,则按照B+树的检索算法即可查找到对应的叶节点,之后获得行数据。
  3. 若对Name列进行条件搜索,则需要两个步: 第一步在辅助索引B+树中检索Name,到达其叶子节点获取对应的主键,第二步使用主键在主索引B+树种再执行一次B+树检索操作,最终到达叶子节点即可获取整行数据。 (重点在于通过其他键需要建立辅助索引)
  4. 聚簇索引默认是主键,如果表中没有定义主键,InnoDB 会选择一个唯一且非空的索代,如果没有这样的索引,InnoDB 会隐式定义一个主键(举似oracle中的Rowld)来作为聚索引,如果已经设置了主键为聚索引又希望再单独设置聚索引,必须先别除主键,然后添加我们想要的聚能索引,最后恢复设置主键即可。

非聚簇索引:

        MYISAM就是使用的非聚簇索引,非聚簇索引的两颗B+树看上去没有什么不同,节点的结构完全一致,只是存储的内容不同。主键索引B+树的节点存储了主键,辅助键索引B+树存储了辅助键。表数据存储在独立的地方,这两颗B+树的叶子结点都使用一个地址指向真正的表数据,对于表数据来说,这两个建没有任何差别,由于索引树是独立的,通过辅助建索引无需访问主键的索引树:

43b2735ff555418a809a1b1f26f48b36.png

5.2、使用聚簇索引的优势

        每次使用辅助索引检索都要经过两次B+树查找,看上去聚簇索引的效率明显要低于非聚簇索引,这不是多此一举吗?聚簇索引的优势在哪?

  1. 由于行数据和聚簇索引的叶子节点存储在一起,同一页中会有多条行数据,访问同一数据页不同行记录时,已经把页加载到了Buffer中(缓存器),再次访问时,会在内存中完成访问,不必访问磁盘。这样主键和行数据是一起被载入内存的,找到叶子节点就可以立刻将行数据返回了,如果按照主键Id来组织数据,获得数据更快。
  2. 辅助索引的叶子节点,存储主键值,而不是数据的存放地址。好处是当行数据放生变化时,索引树的节点也需要分裂变化;或者是我们需要查找的数据,在上一次IO读写的缓存中没有,需要发生一次新的IO操作时,可以避免对辅助索引的维护工作,只需要维护聚簇索引树就好了。另一个好处是,因为辅助索引存放的是主键值,减少了辅助索引占用的存储空间大小。

5.3、聚簇索引需要注意什么

        当使用主键为聚簇索引时,主键最好不要使用UUID,因为UUID的值太过于离散,不适合排序且可能出现新增记录的UUID,会插入在索引树中间的位置,导致索引树调整复杂度变大,消耗更多的时间和资源。

        建议使用int类型的自增,方便排序并且默认会在索引树的末尾增加主键值,对索引树的结构影响最小。而且,逐渐值占用的存储空间越大,辅助索引中保存的主键值也会跟着变大,占用存储空间,也会影响到IO操作读取到的数据量~

5.4、为什么通常建议使用自增id

        聚簇索引的数据的物理存放顺序与索引顺序是一致的,即:只要索引是相邻的,那么对应的数据一定也是相邻的存放在磁盘上的。如果主键不是自增id,那么可以想象,例如使用UUID,每次都是随机值,就会导致每次添加数据时,都不要不断地调整数据的物理地址、重新分页等。当然也有其他措施来减少这些操作,但是这是无法减少这些操作的,但却无法彻底避免。那如果说使用自增,那就简单了,他只需要一页一页的写,索引结构相对紧凑,磁盘碎片少,效率也高~


6、索引失效的常见场景

  • 复合索引(联合索引),要使用最左前缀(也就是说,联合索引,索引的叶子结点在排序时其实是按照创建索引时,最左边这个值排序的,因此要使用最左前缀),否则会失效
  • 查询时使用like关键字,并且以%开头时,索引会失效
  • 在列上进行函数运算时,索引会失效
  • 使用in不会造成索引失效,而not in会
  • 使用or关键字时,如果or的前后的列都是索引则会使用索引,如果其中一个列不是索引,索引就会失效~

好啦,本期就到这里咯,下期见~~~

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/173492.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

新加坡服务器托管-金融企业的选择

新加坡作为一个亚洲金融中心,其优越的地理位置和先进的信息通信技术基础设施,使得其成为了众多金融机构企业选择服务器机房托管的理想地点。金融行业对于服务器的安全性和可靠性要求很高,而将服务器托管在新加坡有许多好处。 首先&#xff0c…

SpringBoot趣探究--1.logo是如何打印出来的

一.前言 从本篇开始,我将对springboot框架做一个有趣的探究,探究一下它的流程,虽然源码看不懂,不过我们可以一点一点慢慢深挖,好了,下面我们来看一下本篇的知识,这个logo是如何打印出来的&#…

Ubuntu设设置默认外放和麦克风设备

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 前言一、pulseaudio 是什么?二、配置外放1.查看所有的外放设备2.设定默认的外放设备3.设定外放设备的声音强度4.设定外放设备静音 三、配置麦克风1.查看…

做好性能测试计划的4个步骤!全都是精华!【建议收藏】

如何做好一次性能测试计划呢?对于性能测试新手来说,也许你非常熟悉Jmeter的使用,也许你清楚的了解每一个系统参数代表的意义,但是想要完成好一次性能测试任务,并不仅仅是简单的写脚本,加压力,再…

育种值探秘丨动植物遗传育种

育种值:生物的数字密码 嗨,大家好!今天分享的笔记是遗传育种领域中那神秘莫测的育种值。这个抽象的名词具体如何理解?为什么说育种值很重要?具体怎么计算?有什么用处? 别担心,我会用…

万字解析设计模式之桥接模式、外观模式

一、桥接模式 1.1概述 桥接模式是一种结构型设计模式,它的作用是将抽象部分和实现部分分离开来,使它们能够独立地变化。这样,抽象部分和实现部分可以分别进行扩展,而不会相互影响。它是用组合关系代替继承关系来实现,…

Linux:wget后台下载/查看后台任务进度

1. 后台下载 使用wget -b url: wget -b http://cn.wordpress.org/wordpress-3.1-zh_CN.zip后台任务启动后,会返回两段话,第一段返回一个pid,代表这个后台任务的进程,并且我们可以kill掉这个id来终止此次下载&#x…

【Python】给出n个数,找出这n个数的最大值,最小值,和。

问题描述 给出n个数,找出这n个数的最大值,最小值,和。 样例输入 5 1 3 -2 4 5 Data 样例输出 5 -2 11 n int(input()) # 从用户输入中读取一个整数,将其赋给变量n# 从用户输入中读取一行字符串,使用空格分割字符串&a…

LED Driver数码屏应用解决方案

今天给大家介绍的产品是LED Driver,这属于电源管理类芯片,一般分为恒流驱动与恒压驱动,但是常见的就是恒流驱动,能够保持产品在驱动中提供恒定且稳定的电流。 基本概述 TM1629是一种带键盘扫描接口的LED(发光二极管显…

线程池[重点]

线程池概述 线程池就是一个可以复用线程的技术。 不使用线程池的问题 :如果用户每发起一个请求,后台就创建一个新线程来处理,下次新任务来了又要创建新线程,而创建新线程的开销是很大的,这样会严重影响系统的性能。 …

2023年中国醇酸树脂涂料需求量、应用领域及市场规模前景分析[图]

醇酸树脂指多元醇和多元酸与脂肪酸经过酯化缩聚生成的高聚物,其由邻苯二甲酸酐、多元醇和脂肪酸或甘油三脂肪酸酯缩合聚合而成。醇酸树脂固化成膜后,具有耐磨性好、绝缘性佳等优势,在涂料领域应用广泛。2022年醇酸树脂产量约336.3万吨&#x…

完全二叉树你需要了解一下

完全二叉树介绍完全二叉树应用场景完全二叉树和满二叉树的区别完全二叉树代码示例拓展 完全二叉树介绍 完全二叉树(Complete Binary Tree)是一种特殊的二叉树,它的定义是:如果设二叉树的深度为h,除第h层外&#xff0c…

基于白冠鸡算法优化概率神经网络PNN的分类预测 - 附代码

基于白冠鸡算法优化概率神经网络PNN的分类预测 - 附代码 文章目录 基于白冠鸡算法优化概率神经网络PNN的分类预测 - 附代码1.PNN网络概述2.变压器故障诊街系统相关背景2.1 模型建立 3.基于白冠鸡优化的PNN网络5.测试结果6.参考文献7.Matlab代码 摘要:针对PNN神经网络…

改进YOLOv8:结合Biformer——基于动态稀疏注意力构建高效金字塔网络架构

🗝️YOLOv8实战宝典--星级指南:从入门到精通,您不可错过的技巧   -- 聚焦于YOLO的 最新版本, 对颈部网络改进、添加局部注意力、增加检测头部,实测涨点 💡 深入浅出YOLOv8:我的专业笔记与技术总结   -- YOLOv8轻松上手, 适用技术小白,文章代码齐全,仅需 …

为什么AirtestIDE的selenium Window突然无法检索控件了?

1. 前言 最近有很多朋友跟我们反馈,为什么1.2.15版本的IDE没办法做网页元素检索了,是不是我们不支持selenium了之类的。 测试后发现,目前版本确实存在这个问题,原因是Chrome113.0.5672.127(最新)版本过高,AirtestIDE…

C语言--输入三角形的三边,输出三角形的面积

一.题目描述 输入三角形的三边,输出三角形的面积。比如:输入三角形的三边长度是3,4,5.输出6 二.思路分析 利用海伦公式可以很好解决 海伦公式的表达式如下: s (a b c) / 2 面积 sqrt((s * (s - a) * (s - b) * (…

基于阶梯碳交易的含P2G-CCS耦合和燃气掺氢的虚拟电厂优化调度matlab程序

微❤关注“电气仔推送”获得资料(专享优惠) 参考文献: 基于阶梯碳交易的含P2G-CCS耦合和燃气掺氢的虚拟电厂优化调度——陈登勇 主要内容: 以碳交易和碳封存成本、燃煤机组启停和煤耗成本、弃风成本、购气成本之和为目标函数&…

安装gitlab

安装gitlab 环境 关闭防火墙以及selinux,起码4核8G 内存至少 3G 不然启动不了 下载环境 gitlab官网:GitLab下载安装_GitLab最新中文基础版下载安装-极狐GitLab rpm包下载地址: [Yum - Nexus Repository Manager (gitlab.cn)](https://pack…

使用 ClickHouse 做日志分析

原作:Monika Singh & Pradeep Chhetri 这是我们在 Monitorama 2022 上发表的演讲的改编稿。您可以在此处找到包含演讲者笔记的幻灯片和此处的视频。 当 Cloudflare 的请求抛出错误时,信息会记录在我们的 requests_error 管道中。错误日志用于帮助解…

【Spring Boot】如何运用Spring Cache并设置缓存失效时间

简单描述 Spring Cache是一个框架,实现了基于注解的缓存功能,只需要简单地加一个注解,就能实现缓存功能。Spring Cache提供了一层抽象,底层可以切换不同的cache实现。具体就是通过CacheManager接口来统一不同的缓存技术。CacheMan…