Mysql大表加索引

Mysql大表加索引,第1张

select (*) from tb_name where create_time >xxx

最终得知是因为这个表数据行数已经超过 一千万了,然后create_time字段又没有索引

那解决办法肯定是加索引喽。

但是这个表是一直在线上运行,很重要和业务部分。如果给千万级的大表在线加索引 ,肯定会卡死。

然后就搜罗了一大筐解决方案,比如 在线无锁加索引使用

ALTER TABLE tbl_name ADD PRIMARY (column), ALGORITHM=INPLACE, LOCK=NONE

后来才发现,这个特性是 Mysql 5.6 以后才支持,然而我们的mysql用的是5.5版本

最后在 《高性能Mysql》一书中看到,可在通过 “影子拷贝”来解决,

就是 先创建一张和源表无关的新表,然后通过重命名和删表 *** 作交换两张表;

当给新表加完索引后,最上面那条查询直接就是0.0002s

场景:在给一张有几万条记录的表添加索引时,进度非常慢,导致其它查询无法进行

处理方式:

使用Navicat的命令行模式,执行以下命令:

show processlist

这时会看到有哪些线程正在执行,也可以查看锁表的线程。你会发现alter table * add key ****那个线程状态是Waiting for table metadata lock,后面有个这个表的所有 *** 作都是这个状态,很明显是这条加索引的语句把表给锁了。

查看线程ID,执行

kill 线程ID

这样被锁住的表就能立即被使用了。

由此得出一个结论,当一张表数据量很大时,不要轻易添加索引,会导致表被锁死!如果非要添加,那么应该先把数据表进行备份,然后进行空表添加索引。

只能通过ALTER TABLE不能create index

参数说明:

问题:

我们知道在MySQL中如果要执行ALTER TABLE *** 作,MySQL会通过制作原来表的一个临时副本来工作。对于表结构的修改在副本上施行,然后将新表替换原始表,此时会产生锁表,用户可以从原始表读取数据,而用户的更新和写入 *** 作都会被lock,待新表准备好后写入新表。

由于在这个过程中会锁表。造成当前 *** 作的表无法写入数据,影响用户使用。由于需要复制原表的数据到中间表,所以表的数据量越大,等待的时候越长,卡死在那里(用户被拒绝执行update和insert *** 作,表现就是延迟了一直在等待)。

解决方式:

我们这里借助影子拷贝的思想利用mysql load data 与 select into outfile手动导数据:

导出语法:

导入语法:

原表结构:

目标表结构:

在mysql命令行执行命令

这一步可能会报错:

解决方式:

在/etc/my.cnf配置文件中加入 secure-file-priv='' ,然后重启mysql服务器, service mysqld restart

也有可能会报错:

解决方式:

给mysql用户加上/tmp/data目录的rwx权限就可以啦

完成


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/8414214.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-16
下一篇 2023-04-16

发表评论

登录后才能评论

评论列表(0条)

保存