IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> MySql-G-性能优化(四) -> 正文阅读

[大数据]MySql-G-性能优化(四)

一、性能分析

??????MySql Query Optimizer

MySql常见瓶颈

  • CPU :CPU在饱和的时候一般发生在数据装入内存或从磁盘上读取数据的时候
  • IO:磁盘I/O瓶颈发生在装入数据远大于内存容量的时候
  • 服务器硬件的性能瓶颈:top,free,iostat和vmstat来查看系统的性能状态? ???

Explain(执行计划)

  • Explain + SQL语句

使用EXPLAIN关键字可以模拟优化器执行SQL查询语句,从而知道MySql是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈

mysql> explain select * from tab_emp;

1)?id -> select查询的序列号,包含一组数字,表示查询中执行select子句或操作表的顺序

三种情况:

  • id相同,执行顺序由上至下

????????

  • id不同,如果是子查询,id的序号会递增,id值越大优先级越高,越先被执行

->如下图所示,执行顺序是:? t3->t1->t2

  • id相同不同,同时存在,id如果相同,可以认为是一组,从上往下顺序执行;在所有组中,id值越大,优先级越高,越先执行

????????

?2)?select_type -->查询的类型,主要是用于区别普通查询、联合查询、子查询等的复杂查询;

  • simple -> 简单的select查询,查询中不包含子查询或者union
  • primary -> 查询中若包含任何复杂的子部分,最外层查询则被标记为
  • subquery -> 在select或where列表中包含了子查询
  • derived -> 在from列表中包含的子查询被标记为derived(衍生) MySql会递归执行这些子查询,把结果放在临时表里
  • union -> 若第二个select出现在union之后,则被标记为union;若union包含在from子句的子查询中,外层select将被标记为:derived
  • union result -> 从union表获取结果的select

3) type -> 访问类型,从最好到最差依次是

  • system > const > eq_ref > ref > range > index > ALL

?一般来说,得保证查询至少达到range级别,最好能达到ref

system

?表只有一行记录(等于系统表),这是const类型的特例,平时不会出现,这个可以忽略不计

?const

表示通过索引一次就找到了,const用于比较primary key或unique索引。因为只匹配一行数据,所以很快,如将主键置于where列表中,MySql就能将该查询转换为一个常量

eq_ref

唯一性索引扫描,对于每个索引键,表中只有一条记录与之匹配。常见于主键或唯一索引扫描

?ref

非唯一性索引扫描,返回匹配某个单独值的所有行。本质上也是一种索引访问,它返回所有匹配某个单独值的行,然而,它可能会找到多个符合条件的行,所以它应该属于查找和扫描的混合体

?range

只检索给定范围的行,使用一个索引来选择行。key 列显示使用了那个索引,一般就是在你的where语句中出现了 between、<、>、in等的查询

这种范围扫描索引扫描比全表扫描要好,因为它只需要开始于索引的某一点,而结束语另一点,不用扫描全部索引。

index

Full Index Scan, index与ALL区别为index类型只遍历索引树。这通常比ALL快,因为索引文件通常比数据文件小。(也就是说虽然all和Index都是读全表,但index是从索引中读取的,而all是从硬盘中读的)

?ALL

Full Table Scan,将遍历全表以找到匹配的行

4)? possible_keys

显示可能应用到这张表中的索引,一个或多个。查询涉及到的字段上若存在索引,则该索引将被列出,但不一定被查询实际使用

5)key

实际使用的索引。如果为NULL,则没有使用索引;若查询中出现了覆盖索引,则该索引仅出现在key列表中

?6)key_len

表示索引中使用的字节数,可通过该列计算查询中使用的索引的长度。在不损失精确性的情况下,长度越短越好;key_len显示的值为索引字段的最大可能长度,并非实际使用长度,即key_len是根据表定义计算而得,不是通过表内检索出的

?7)ref

显示索引的那一列被使用了,如果可能的话,是一个常数。哪些列或常量被用于查找索引列上的值

8)rows

根据表统计信息及索引选用情况,大致估算出找到所需的记录所需要读取的行数,读取的行数越少越好

?9)Extra

包含不适合在其他列中显示但十分重要的额外信息

*Using filesort (文件内排序,出现这个说明mysql自己重新做了数据排序)

  • 说明mysql会对数据使用一个外部的索引排序,而不是按照表内的索引顺序进行读取。
  • MySQL中无法利用索引完成的排序操作称为 “文件排序”

?-> 上图,使用了Using filesort 文件内排序,说明我们建的复合索引,排序没有用到索引,下图,可以发现?Extra: Using where; Using index 没有使用 Using filesort 说明排序是按照索引排序来的故效率要高于上图

*Using temporary

  • 使用临时表保存中间结果,MySQL在对查询结果排序时使用临时表。常见于排序 order by 和分组查询 group by

-> Using temporary 使用了临时表;Using filesort? 使用了文件内排序,这种sql效率是极低的

->?下段sql,分组排序按照我们建索引的顺序来,发现mysql没有再使用临时表文件内排序

总结:建立复合索引,c1、c2、c3,分组排序时,尽量按照复合索引的顺序进行查询,可以避免文件内排序和使用临时表

*Using index

  • 表示相应的select操作中使用了覆盖索引(Covering Index),避免访问了表的数据行,效率不错!

->?如果同时出现using where,表明索引被用来执行索引键值的查找

?->?如果没有同时出现using where,表明索引用来读取数据而非执行查找动作

注意:

? ? ? ? 如果要使用覆盖索引,一定要注意select列表中只取出需要的列,不可select * ,因为如果将所有字段一起做索引会导致索引文件过大,查询性能下降。

Using where

  • 表明使用了where过滤

Using join buffer

  • 使用了连接缓存

impossible where

  • where子句的值总是false,不能用来获取任何元组

select tables optimized away

  • 在没有group by子句的情况下,基于索引优化min/max操作或者对应MyIsAM存储引擎优化count(*)操作,不必等到执行阶段再进行计算,查询执行计划生成的阶段即完成优化

?distinct

  • 优化distinct操作,在找到第一匹配的元组后即停止找同样值的动作

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-04-06 23:15:00  更:2022-04-06 23:17:23 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 4:55:56-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码