MySQL基础架构详解

概述

我们学习东西,都不应该是先去了解细节,而是应该窥其全貌,这样才能从高纬度去理解问题,同样我们学习mysql也是一样的,我们应该先了解整个mysql架构,及来龙去脉,才能更好的掌握它。下面我们开始深入浅出的方式了解mysq基础架构知识。

SQL执行的来龙去脉

我们学习MySQL的时候,会编写SQL语句,如 select * from T where id=0这里查询T表,条件ID等于0。当我们执行这条SQL语句的时候,返回一个结果,却不知道这条SQL语句在MySQL里面的执行流程。如果我们深入去了解这个条SQL的执行过程,我们会发现MySQL在执行SQL过程中会经历非常多步骤,每一个步骤都有大量的功能支持,下面我们一一拆解这些功能,把它当成一辆完成的车一样,将零部件一件件拆解下来,深刻认识这些零件,让我们深入理解这些零件在MySQL所体现的作用。

SQL执行流程图
在这里插入图片描述

连接器

在使用MySQL的时候,用户会先对MySQL进行连接,在这时我们直面的第一个零件就是连接器,连接器负责和客户端建立连接,获取权限,维持和管理连接。连接命令 mysql -h ір − P ір -P ірPport -u$user -p执行完命令后,则建立连接,这个建立连接过程中会进行经典的TCP握手交互,之后认证身份,认证成功后会验证当前用户的权限,用于之后这个连接里面的权限判断逻辑,都会依赖此时读到的权限。
当我们建立连接后,我们可以使用show processlist 查看所有连接情况,当command 列显示为 “Sleep”时说明这个行记录是空闲连接。
如果当前连接的客户端太长时间没有活跃,连接器将会自动断开,这个时间,我们可以通过wait_timeout 控制,这个参数默认是8小时。
如果连接被断开之后,客户端再次发起请求连接,会收到一个错误提醒:Lost connection to MySQL server during query。如果这个时候你看到这个信息,想要继续操作,则需要重新连接,才能继续执行。长连接在数据库里面使用,长连接是指当客户端连接成功后,如果客户端有持续请求,则会一直使用这个连接。短连接在数据库使用,短连接是指客户端连接成功后,客户端使用一次这个连接后,这个连接就会关闭,如果下次需要连接则需要重新创建短连接,这个创建连接的成本是很高的,所以一般在数据库中建议使用长连接,避免频繁创建连接,浪费资源。当时使用长连接也会造成一些问题,如,如果大量连接创建后,我们会观察服务器内存,会发现内存占用较高,因为创建大量连接会导致系统内存占用过高,此时还可能经历被系统杀掉(OOM),从而出现MySQL服务重启的现象。
怎么解决长连接带来的问题呢,有两种方案如下?
● 定期断开长连接,避免大量无用连接而占用内存。在使用一段时间内,在程序里面判断一个占用内存的查询,断开连接,之后要查询在重新连接。
● 如果使用的MySQL5.7 或者比5.7更新的版本,可以在执行一次占用内存较大的操作后,通过执行mysql_reset_connection来重新初始化连接资源,这个过程不需要重连和重新做权限验证,但是这个操作会讲连接恢复到刚刚连接时的状态。

查询缓存(mysql8已经废弃)

建立连接后,开始执行SQL语句,执行逻辑会先查询缓存。MySQL拿到一个查询请求后, 会先到查询缓存看,之前是不是执行过这条语句。之前执行过的语句及其结果可能会以key-value对的形式, 被直接缓存在内存中。 key是查询的语句,value是查询的结果。如果你的查询能够直接在这个缓存中找到key, 那么这个value就会被直接返回给客户端。
但是大多数情况下我会建议你不要使用查询缓存,为什么呢?因为查询缓存往往弊大于利。
查询缓存的失效非常频繁, 只要有对一个表的更新,这个表上所有的查询缓存都会被清空。因此很可能你费劲地把结果存起来, 还没使用呢, 就被一个更新全清空了。对于更新压力大的数据库来说,查询缓存的命中率会非常低。除非你的业务就是有一张静态表,很长时间才会更新一次。
比如,一个系统配置表,那这张表上的查询才适合使用查询缓存。MySQL也提供了这种“按需使用”的方式。你可以将参数query_cache_type设置成 DEMAND,这样对于默认的SQL语句都不使用查询缓存。而对于你确定要使用查询缓存的语句,可以用SQL_CACHE显式指定,像下面这个语句一样:select SQL_CACHE * from T where ID=10;
MySQL 8.0版本直接将查询缓存的整块功能删掉了, 8.0开始彻底没有这个功能了。

分析器

如果没有命中缓存,则会进行执行SQL环节,在到真正执行SQL语句前,会进行SQL语句分析,然后对SQL语句的解析。而分析器又被称为“词法分析器”,你输入的是由多个字符串和空格组成的一条SQL语句,MySQL需要识
别出里面的字符串分别是什么,代表什么。做完了这些识别以后, 就要做“语法分析”。根据词法分析的结果, 语法分析器会根据语法规则,判断你输入的这个SQL语句是否满足MySQL语法。

优化器

经过了分析器, MySQL就知道你要做什么了。 在开始执行之前,还要先经过优化器的处理。优化器是在表里面有多个索引的时候,决定使用哪个索引,或者在一个语句有多表关联(join)的时候,决定各个表的连接顺序。

执行器

开始执行的时候, 要先判断一下你对这个表T有没有执行查询的权限,如果没有,就会返回没有权限的错误,执行器调用一次。 如果有权限,就打开表继续执行。打开表的时候,执行器就会根据表的引擎定义,去使用这个引
擎提供的接口,在引擎内部则扫描了多行, 因此引擎扫描行数跟rows_examined并不是完全相同的。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/120682.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

Mybatis-Plus使用Wrapper自定义SQL

文章目录 准备工作Mybatis-Plus使用Wrapper自定义SQL注意事项目录结构如下所示domain层Controller层Service层ServiceImplMapper层UserMapper.xml 结果如下所示:单表查询条件构造器单表查询,Mybatis-Plus使用Wrapper自定义SQL联表查询不用,My…

qt6:无法使用setFontColor

问题描述 跟着C开发指南视频学习,但是发现无论是直接使用ui设计,还是纯代码都无法实现变更字体颜色的功能。图中显示,点击颜色控件后,文本框的文字加粗、下划线、斜体等才能设置,但是无法变更颜色。 此文提醒qt sty…

基于驾驶训练算法的无人机航迹规划-附代码

基于驾驶训练算法的无人机航迹规划 文章目录 基于驾驶训练算法的无人机航迹规划1.驾驶训练搜索算法2.无人机飞行环境建模3.无人机航迹规划建模4.实验结果4.1地图创建4.2 航迹规划 5.参考文献6.Matlab代码 摘要:本文主要介绍利用驾驶训练算法来优化无人机航迹规划。 …

『MySQL快速上手』-③-库的操作

文章目录 1.创建数据库2.创建数据库案例3.字符集和校验规则3.2 校验规则对数据库的影响3.2.1 进行查询3.2.2 进行排序 4.字符集和检验规则的作用5.操纵数据库5.1 查看数据库5.2 显示创建语句5.3 修改数据库5.4 数据库删除 6.备份与恢复6.1 备份6.2 还原6.3 注意事项 7.查看数据…

[量化投资-学习笔记007]Python+TDengine从零开始搭建量化分析平台-布林带

布林带(Bollinger Bands)也称为布林通道、保力加通道,是由约翰布林格(John Bollinger)发明的技术分析指标。布林通道通常被用来确认资产价格波动范围。 布林通道是由三条平滑的曲线组成的趋势线图表,中线为…

js原型链

什么叫原型链 原型链是js中的核心,原型链将各个属性链接起来,在原型链上面定义,原型链上的其他属性能够使用,原型链就是保证继承 原型链区分 原型链分为显式原型和隐式原型 显式原型:只有函数和构建函数才有显式原型…

CCF CSP认证 历年题目自练Day44

题目一 试题编号: 201612-3 试题名称: 权限查询 时间限制: 1.0s 内存限制: 256.0MB 问题描述: 问题描述   授权 (authorization) 是各类业务系统不可缺少的组成部分,系统用户通过授权机制获得系统中各个…

[ACTF2020 新生赛]BackupFile 1

题目环境: 好好好,让找源文件是吧?咱们二话不说直接扫它后台 使用dirsearch工具扫描网站后台(博主有这个工具的压缩包,可以私聊我领取)python dirsearch.py -u http://0d418151-ebaf-4f26-86b2-5363ed16530…

01-基于IDEA,Spring官网,阿里云官网,手动四种方式创建SpringBoot工程

快速上手SpringBoot SpringBoot技术由Pivotal团队研发制作,功能的话简单概括就是加速Spring程序初始搭建过程和Spring程序的开发过程的开发 最基本的Spring程序至少有一个配置文件或配置类用来描述Spring的配置信息现在企业级开发使用Spring大部分情况下是做web开…

基于机器学习的 ICU 脑血管疾病死亡风险智能预测系统

温馨提示:文末有 CSDN 平台官方提供的学长 Wechat / QQ 名片 :) 1. 项目简介 重症患者或重大手术后的患者在重症监护室(ICU)内通过多种生命支持系统以维持生理功能。患者在ICU 内会被频繁持续的记录生命体征和实验室测量等多种数据。由于高频…

为什么有了MAC地址,还需要IP地址?

解释 搞懂这个问题,首先需要了解交换机的功能 交换机内部有一张MAC地址映射表,记录着MAC地址和端口的对应关系。 如果A要给B发送一个数据包,构造如下格式的数据结构: 到达交换机时,交换机内部通过自己维护的 MAC 地…

b2b.ccb.com:443 需要你的凭据

忙活了一天,晚上回来准备查一下公户的最近的账单。因为昨天晚上熬夜重新做了电脑系统,就下载了建设银行的E路护航,一切安装就绪,准备进入企业网银时,被这些垃圾搞的系统及软件恶心到了,在此记录一下&#x…

Flutter利用GridView创建网格布局实现优美布局

文章目录 简介使用详解导入依赖项创建一个基本的 GridView一些参数说明使用GridView.count来构造 其他控制总结 简介 GridView 是 Flutter 中用于创建网格布局的强大小部件。它允许你在行和列中排列子小部件,非常适合显示大量项目,例如图像、文本、卡片…

js树形数组遍历练习,扁平化、格式化、获取节点父级

1.树形数组扁平化 数组扁平化的方式很多,这里主要是用递归处理,除此之外还有正则、扩展运算符等等 const list [{name:1,id:1,children:[{name:11,id:11,children:[{name:111,id:111}]},{name:12},]},{name:2,id:2,children:[{name:21,id:21,children:…

数据结构-栈和队列(一)

目录 1.栈 1.1 栈的概念及结构 1.2 栈的实现 初始化栈: 入栈: 判空函数: 出栈: 获取栈顶元素: 获取栈中有效元素的个数: 销毁栈: 完整代码: 测试: 2. 队列 …

在 Python 中使用 Selenium 按文本查找元素

我们将通过示例介绍在Python中使用selenium通过文本查找元素的方法。 在 Python 中使用 Selenium 按文本查找元素 软件测试是检查应用程序是否满足用户需求的技术。 该技术有助于使应用程序成为无错误的应用程序。 软件测试可以手动完成,也可以通过某些软件完成。…

解决Docker启动之npm版本不兼容问题

报错内容: npm WARN read-shrinkwrap This version of npm is compatible with lockfileVersion1, but package-lock.json was generated for lockfileVersion2. Ill try to do my best with it! npm WARN tar ENOENT: no such file or directory, open /home/wvp-…

ConcurrentHashMap 底层具体实现知道吗?实现原理是什么?

(本文引自mic老师文档) 之前分享过一期 HashMap 的面试题,然后有个小伙伴私信我说,他遇到了一个 ConcurrentHashMap 的问题不知道怎么回答。 于是,就有了这一期的内容!! …

Skywalking介绍

一个优秀的项目,除了具有高拓展的架构、高性能的方案、高质量的代码之外,还应该在上线后具备多角度的监控功能。现在企业中的监控服务也有很多,Skywalking除了提供多维度、多粒度的监控之外,也提供了良好的图形化界面以及性能剖析…

Python--- lstrip()--删除字符串两边的空白字符、rstrip()--删除字符串左边的空白字符、strip()--删除字符串右边的空白字符

strip() 方法主要作用:删除字符串两边的空白字符(如空格) lstrip() 方法 left strip,作用:只删除字符串左边的空白字符 rstrip() 方法,作用:只删除字符串右边的空白字符 strip 英 /strɪp…