mysql 多表连接查询速度超级慢

mysql 多表连接查询速度超级慢,第1张

问题

我们有一个 SQL,用于找到没有主键 / 唯一键的表,但是在 MySQL 5.7 上运行特别慢,怎么办?

实验

我们搭建一个 MySQL 5.7 的环境,此处省略搭建步骤。

写个简单的脚本,制造一批带主键和不带主键的表:

执行一下脚本:

现在执行以下 SQL 看看效果:

...

执行了 16.80s,感觉是非常慢了。

现在用一下 DBA 三板斧,看看执行计划:

感觉有点惨,由于 information_schema.columns 是元数据表,没有必要的统计信息。

那我们来 show warnings 看看 MySQL 改写后的 SQL:

我们格式化一下 SQL:

可以看到 MySQL 将

select from A where A.x not in (select x from B) //非关联子查询

转换成了

select from A where not exists (select 1 from B where B.x = a.x) //关联子查询

如果我们自己是 MySQL,在执行非关联子查询时,可以使用很简单的策略:

select from A where A.x not in (select x from B where ...) //非关联子查询:1. 扫描 B 表中的所有记录,找到满足条件的记录,存放在临时表 C 中,建好索引2. 扫描 A 表中的记录,与临时表 C 中的记录进行比对,直接在索引里比对,

而关联子查询就需要循环迭代:

select from A where not exists (select 1 from B where B.x = a.x and ...) //关联子查询扫描 A 表的每一条记录 rA:     扫描 B 表,找到其中的第一条满足 rA 条件的记录。

显然,关联子查询的扫描成本会高于非关联子查询。

我们希望 MySQL 能先"缓存"子查询的结果(缓存这一步叫物化,MATERIALIZATION),但MySQL 认为不缓存更快,我们就需要给予 MySQL 一定指导。

...

可以看到执行时间变成了 0.67s。

整理

我们诊断的关键点如下:

\1. 对于 information_schema 中的元数据表,执行计划不能提供有效信息。

\2. 通过查看 MySQL 改写后的 SQL,我们猜测了优化器发生了误判。

\3. 我们增加了 hint,指导 MySQL 正确进行优化判断。

但目前我们的实验仅限于猜测,猜中了万事大吉,猜不中就无法做出好的诊断。

两种可能

第一是

机器本身有太多的进程或者服务导致cpu占有两次太高

或者硬盘老化

冗余数据较多

查询结果缓慢

第二还有可能是

mysql的设置或者sql语句本身的问题了

看是哪方面的。

有两个myslq数据库,分别装在了两个服务器上,即210&249;其他服务器上连接数据库,发现249的数据库连接很慢,而210正常;结果是:249数据库出了问题。尝试的解决办法:1.重启apache (在/usr/local/apache/bin 下 apachectl -k restart) 不管用;2.重启数据库所在服务器(在Linux下输入reboot)不管用;3.在网上搜帖子“连接mysql数据库速度很慢的原因,发现mysql就会试图去解析来访问的机器的domain name,在经历一段时间后才取出数据.在网上找了很久才发现,一个参数:skip-name-resolve,在mysql的配置文件my.cnf中,在[mysqld]下面加上这个配置就可以了.前不久断网时登录内类系统后台奇慢的问题,也是由这个原因引起的。”首先找到mysql的配置文件my.cnf,在/etc/下,按照帖子的方法,修改【mysqld】,加上了skip-name-resolve;然后重启MySQL,先关闭:在/bin/下 mysqladmin -uroot -p密码 shutdown, ps aux|grep mysql 观察mysql是否被关闭,启动:mysqld_safe &;重启过后,管用访问速度很快~~这里推荐安全的重启方法$mysql_dir/bin/mysqladmin -u root -p shutdown$mysql_dir/bin/safe_mysqld &mysqladmin和mysqld_safe位于Mysql安装目录的bin目录下,很容易找到的。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/7295593.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-04
下一篇 2023-04-04

发表评论

登录后才能评论

评论列表(0条)

保存