百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

MySQL 从入门到精通(三) MySQL体系结构及存储引擎

bigegpt 2024-08-04 11:31 10 浏览

存储引擎

1、MySQL 的体系结构

我们根据上图的MySQL体系结构图进行讲解,最上层是客户端连接器(对应server端的连接池),可以看到支持目前所有主流的编程语言,通过各自api接口同MySQL服务器建立连接。

第二层为MySQL Server层,这一层是我们主要关注的,作为MySQL 服务端的核心层。从图上可以看到这一层是分层的,一层为线程连接池(show full processlist;),主要接收客户端的连接,然后完成连接的处理如认证授权,连接数的限制等相关操作。当我们通过账号密码连接mysql 服务器的时候,连接层会校验我们输入的用户名及密码,这个过程就是授权认证的过程,以及授权认证完成之后还要校验每一个客户端所具有的权限,能够操作哪些数据集哪些表。二层为服务层:包含SQL 接口、解析器、查询优化器、查询缓存以及跨存储引擎层的实现也都是在这一层实现的,比如DML/DDL语句的封装还有存储过程,视图,触发器这些都是在这一层。

第三层为存储引擎层,如图一个一个的蓝色圆桶,描述为可插拔的存储引擎

,就是说可以按照需求进行加入和剔除,这些存储引擎主要作用是控制MySQL数据的存储和提取方式,同时发现索引index是在此层实现的。

第四层为数据存储层,通过上层我们知道存储引擎层是控制数据组织及存取方式的,但是具体的数据最终是存在磁盘中的,所以这一层主要是存储数据库的相关数据的。主要包括如redo 、Undo 日志、数据、索引、二进制日志、慢日志等。

纵观以上可以概述为:

一、连接层:为最上层,是一些客户端和连接服务,主要完成一些类似于连接,授权、认 证处理,及相关的安全方案,服务器也会为安全接入的每个客户端验证它具有的 操作权限。

二、服务层: 这一层的架构主要完成大多数的核心服务功能,如SQL接口,并完成缓存查询, SQL的分析和优化,部分内置函数的执行,所有跨存储引擎的功能也是在这一层实 现,如存储过程、函数等。

三、引擎层: 存储引擎真正的负责了MySQL中数据的存储和提取,服务器通过API和存储引 擎进行通信,不同的存储引擎具有不同的功能,这样我们可以根据自己的需要, 来选择合适的存储引擎。

四、存储层: 主要是将数据存储在文件系统之上,并完成与存储引擎的交互。


2、存储引擎介绍

首先存储引擎是作用在表上的, 也就意味着,不同的表可以有不同的存储引擎类 型,可以在创建表时给定。

CREATE TABLE `account` (
`id` int(11) NOT NULL AUTO_INCREMENT COMMENT 'ID',
`name` varchar(10) DEFAULT NULL COMMENT '姓名',
`vacancy` int(11) DEFAULT NULL COMMENT '余额',
PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=3 DEFAULT CHARSET=utf8mb4 COMMENT='账户表'

查看当前数据库支持的存储引擎: show engines;可以看到innodb为默认引擎,支持

Supports transactions事务, row-level locking行锁, and foreign keys外键。

建表时指定存储引擎

create table my_engines(

id int;

name varchar(10);

....

) engine = MyISAM;

3、存储引擎特点

innodb: innodb是一种兼顾高可靠性和高性能的通用存储引擎,在MySQL5.5之后.Inno DB是默认存储引擎。

innodb的特点是DML(对表的增删改)操作遵循ACID模型,支持事务,行级锁,提高并发 访问性能,支持 外键foreign key约束,保证数据的完整性和正确性。

innodb涉及的文件: 可以发现每个innodb引擎的表都会生成对应的*.ibd (*表示表名)的 表空间文件,主要存储该表的表结构(frm、sdi)、数据和索引。

涉及参数为: innodb_file_per_table # 如果为ON 表示使用独立表空间

[root@db-master /data/mydata/mdata/data/test]# ll *.ibd
-rw-r----- 1 mysql mysql 98304 Apr 5 23:51 account.ibd
-rw-r----- 1 mysql mysql 98304 Apr 4 18:19 caurse.ibd
-rw-r----- 1 mysql mysql 98304 Apr 4 14:53 employee.ibd
-rw-r----- 1 mysql mysql 98304 Apr 4 16:05 score.ibd
-rw-r----- 1 mysql mysql 98304 Apr 2 11:20 staff.ibd
-rw-r----- 1 mysql mysql 131072 Apr 4 18:27 student_caurse.ibd
-rw-r----- 1 mysql mysql 98304 Apr 4 18:16 student.ibd
-rw-r----- 1 mysql mysql 114688 Apr 4 21:14 tb_user_edu.ibd
-rw-r----- 1 mysql mysql 98304 Apr 4 21:03 tb_user.ibd
-rw-r----- 1 mysql mysql 114688 Apr 4 16:47 user.ibd

如何查看ibd文件的内容,MySQL8默认自带ibd2sdi 可以查看,5.7没有。

innodb 逻辑存储结构

表空间TableSpace: 在一个表空间中包含若干个段

段Segment: 段中又包含若干的区

区Extent: 区中又包含若干个页,最小的存储分配单元1M,64个page

页Page: 包含若干行,页是磁盘操作的最小单元16k

行Row: 包含最后一次操作事务的id,指针,字段

MyISAM引擎特点:

MyISAM是MySQL早期的默认存储引擎,特点是不支持事务,不支持外键,支持 表锁,不支持行锁,访问速度快,涉及的文件包括MYD,MYI,SDI。

*.sdi: 存储表结构信息, 文本文件,以json格式存储。

*.MYD: 存储数据

*.MYI: 存储索引

Memory存储引擎特点

Memory引擎的表数据是存储在内存中,由于受到硬件问题,或者断电问题的影响, 只能将这些表作为临时表或者缓存使用。

特点: 内存存放,支持hash索引,涉及的文件*.sdi 主要是存储表结构。

这三种引擎特点如图

4、存储引擎的选择

在选择存储引擎时,应该根据应用系统的特点选择合适的存储引擎,对于复杂的应用 系统,还可以根据实际情况选择多种存储引擎进行组合。

innodb: mysql 默认存储引擎,支持事务 外键, 如果应用对事务的完整性有比较高的 要求,在并发条件下要求数据的一致性,数据操作除了插入和查询之外,还包含很多更 新,删除操作,那么innodb存储引擎是比较合适的选择

MyISAM: 如果应用是以读操作和插入操作为主的,只有很少的更新和删除操作,并 且对事务的完整性、并发性要求不高,那么选择这个存储引擎是非常合适的。

Memory: 将所有数据保存在内存中,访问速度快,通常用于临时表及缓存, MEMO RY的缺陷就是对表的大小有限制,太大的表无法缓存在内存中,而且无法保障 数据的安全性。


提示: 存储引擎的应用innodb主要用于存储业务系统中对事务 数据完整性要求较高的核心数据。 MyISAM主要用于存储业务系统的非核心事务。

相关推荐

方差分析简介(方差分析通俗理解)

介绍方差分析(ANOVA,AnalysisofVariance)是一种广泛使用的统计方法,用于比较两个或多个组之间的均值。单因素方差分析是方差分析的一种变体,旨在检测三个或更多分类组的均值是否存在...

正如404页面所预示,猴子正成为断网元凶--吧嗒吧嗒真好吃

吧嗒吧嗒,绘图:MakiNaro你可以通过加热、冰冻、水淹、模塑、甚至压溃压力来使网络光缆硬化。但用猴子显然是不行的。光缆那新挤压成型的塑料外皮太尼玛诱人了,无法阻挡一场试吃盛宴的举行。印度政府正...

Python数据可视化:箱线图多种库画法

概念箱线图通过数据的四分位数来展示数据的分布情况。例如:数据的中心位置,数据间的离散程度,是否有异常值等。把数据从小到大进行排列并等分成四份,第一分位数(Q1),第二分位数(Q2)和第三分位数(Q3)...

多组独立(完全随机设计)样本秩和检验的SPSS操作教程及结果解读

作者/风仕在上一期,我们已经讲完了两组独立样本秩和检验的SPSS操作教程及结果解读,这期开始讲多组独立样本秩和检验,我们主要从多组独立样本秩和检验介绍、两组独立样本秩和检验使用条件及案例的SPSS操作...

方差分析 in R语言 and Excel(方差分析r语言例题)

今天来写一篇实际中比较实用的分析方法,方差分析。通过方差分析,我们可以确定组别之间的差异是否超出了由于随机因素引起的差异范围。方差分析分为单因素方差分析和多因素方差分析,这一篇先介绍一下单因素方差分析...

可视化:前端数据可视化插件大盘点 图表/图谱/地图/关系图

前端数据可视化插件大盘点图表/图谱/地图/关系图全有在大数据时代,很多时候我们需要在网页中显示数据统计报表,从而能很直观地了解数据的走向,开发人员很多时候需要使用图表来表现一些数据。随着Web技术的...

matplotlib 必知的 15 个图(matplotlib各种图)

施工专题,我已完成20篇,施工系列几乎覆盖Python完整技术栈,目标只总结实践中最实用的东西,直击问题本质,快速帮助读者们入门和进阶:1我的施工计划2数字专题3字符串专题4列表专题5流程控制专题6编...

R ggplot2常用图表绘制指南(ggplot2绘制折线图)

ggplot2是R语言中强大的数据可视化包,基于“图形语法”(GrammarofGraphics),通过分层方式构建图表。以下是常用图表命令的详细指南,涵盖基本语法、常见图表类型及示例,适合...

Python数据可视化:从Pandas基础到Seaborn高级应用

数据可视化是数据分析中不可或缺的一环,它能帮助我们直观理解数据模式和趋势。本文将全面介绍Python中最常用的三种可视化方法。Pandas内置绘图功能Pandas基于Matplotlib提供了简洁的绘...

Python 数据可视化常用命令备忘录

本文提供了一个全面的Python数据可视化备忘单,适用于探索性数据分析(EDA)。该备忘单涵盖了单变量分析、双变量分析、多变量分析、时间序列分析、文本数据分析、可视化定制以及保存与显示等内容。所...

统计图的种类(统计图的种类及特点图片)

统计图是利用几何图形或具体事物的形象和地图等形式来表现社会经济现象数量特征和数量关系的图形。以下是几种常见的统计图类型及其适用场景:1.条形图(BarChart)条形图是用矩形条的高度或长度来表示...

实测,大模型谁更懂数据可视化?(数据可视化和可视化分析的主要模型)

大家好,我是Ai学习的老章看论文时,经常看到漂亮的图表,很多不知道是用什么工具绘制的,或者很想复刻类似图表。实测,大模型LaTeX公式识别,出乎预料前文,我用Kimi、Qwen-3-235B...

通过AI提示词让Deepseek快速生成各种类型的图表制作

在数据分析和可视化领域,图表是传达信息的重要工具。然而,传统图表制作往往需要专业的软件和一定的技术知识。本文将介绍如何通过AI提示词,利用Deepseek快速生成各种类型的图表,包括柱状图、折线图、饼...

数据可视化:解析箱线图(box plot)

箱线图/盒须图(boxplot)是数据分布的图形表示,由五个摘要组成:最小值、第一四分位数(25th百分位数)、中位数、第三四分位数(75th百分位数)和最大值。箱子代表四分位距(IQR)。IQR是...

[seaborn] seaborn学习笔记1-箱形图Boxplot

1箱形图Boxplot(代码下载)Boxplot可能是最常见的图形类型之一。它能够很好表示数据中的分布规律。箱型图方框的末尾显示了上下四分位数。极线显示最高和最低值,不包括异常值。seaborn中...