Kettle之mysql慢查询分析
数据库优化维度有四个:
硬件、系统配置、数据库表结构、SQL及索引
优化成本:
硬件系统配置数据库表结构SQL及索引
优化效果:
硬件系统配置数据库表结构SQL及索引
1。查看本机MySQLServer慢查询是否打开
若慢查询状态没有打开,可以通过root用户和以下命令进行打开
2。mysqldumpslow分析慢查询
mysqldumpslow参数如下:
s:是表示按照何种方式排序
c:访问次数
i:锁定时间
r:返回记录
t:查询时间
al:平均锁定时间
ar:平均返回记录数
at:平均查询时间
t:即为返回前面多少条数据
g:后边搭配一个正则匹配模式,大小写不敏感
t3显示前3条慢查询
3。Explain查看SQL执行计划
1、selecttype列
1)simple:不包含子查询和union的简单查询
2)primary:复杂查询中最外层的select
3)subquery:包含在select中的子查询(不在from的子句中)
4)derived:包含在from子句中的子查询。mysql会将查询结果放入一个临时表中,此临时表也叫衍生表
5)union:在union中的第二个和随后的select,UNIONRESULT为合并的结果
2、table列
表示当前行访问的是哪张表。当from中有子查询时,table列的格式为,表示当前查询依赖idN行的查询,所以先执行idN行的查询,如上面selecttype列图4所示。当有union查询时,UNIONRESULT的table列的值为union1,2,1和2表示参与union的行id
3、partitions列
查询将匹配记录的分区。对于非分区表,该值为NULL。
4、type列
此列表示关联类型或访问类型。也就是MySQL决定如何查找表中的行。依次从最优到最差分别为:systemconsteqrefrefrangeindexall。
NULL:MySQL能在优化阶段分解查询语句,在执行阶段不用再去访问表或者索引。
system、const:MySQL对查询的某部分进行优化并把其转化成一个常量(可以通过showwarnings命令查看结果)。system是const的一个特例,表示表里只有一条元组匹配时为system。
eqref:主键或唯一键索引被连接使用,最多只会返回一条符合条件的记录。简单的select查询不会出现这种type。
ref:相比eqref,不使用唯一索引,而是使用普通索引或者唯一索引的部分前缀,索引和某个值比较,会找到多个符合条件的行。
range:通常出现在范围查询中,比如in、between、大于、小于等。使用索引来检索给定范围的行。
index:扫描全索引拿到结果,一般是扫描某个二级索引,二级索引一般比较少,所以通常比ALL快一点。
ALL:全表扫描,扫描聚簇索引的所有叶子节点。
possiblekeys列
此列显示在查询中可能用到的索引。如果该列为NULL,则表示没有相关索引,可以通过检查where子句看是否可以添加一个适当的索引来提高性能。
5、key列
此列显示MySQL在查询时实际用到的索引。在执行计划中可能出现possiblekeys列有值,而key列为null,这种情况可能是表中数据不多,MySQL认为索引对当前查询帮助不大而选择了全表查询。如果想强制MySQL使用或忽视possiblekeys列中的索引,在查询时可使用forceindex、ignoreindex。
6、keylen列
此列显示MySQL在索引里使用的字节数,通过此列可以算出具体使用了索引中的那些列。索引最大长度为768字节,当长度过大时,MySQL会做一个类似最左前缀处理,将前半部分字符提取出做索引。当字段可以为null时,还需要1个字节去记录。
keylen计算规则:
字符串:
char(n):n个数字或者字母占n个字节,汉字占3n个字节
varchar(n):n个数字或者字母占n个字节,汉字占3n2个字节。2字节用来存储字符串长度。
数字类型:
tinyint:1字节smallint:2字节int:4字节bigint:8字节
时间类型
date:3字节timestamp:4字节datetime:8字节
7、ref列
此列显示key列记录的索引中,表查找值时使用到的列或常量。常见的有const、字段名
8、rows列
此列是MySQL在查询中估计要读取的行数。注意这里不是结果集的行数。
9、Extra列
此列是一些额外信息。常见的重要值如下:
1)Usingindex:使用覆盖索引(如果select后面查询的字段都可以从这个索引的树中获取,不需要通过辅助索引树找到主键,再通过主键去主键索引树里获取其它字段值,这种情况一般可以说是用到了覆盖索引)。
2)Usingwhere:使用where语句来处理结果,并且查询的列未被索引覆盖。
3)Usingindexcondition:查询的列不完全被索引覆盖,where条件中是一个查询的范围。
4)Usingtemporary:MySQL需要创建一张临时表来处理查询。出现这种情况一般是要进行优化的。
5)Usingfilesort:将使用外部排序而不是索引排序,数据较小时从内存排序,否则需要在磁盘完成排序。
6)Selecttablesoptimizedaway:使用某些聚合函数(比如max、min)来访问存在索引的某个字段时。