Mysql如何加快大表的ALTERTABLE操作速度
MYSQL的ALTERTABLE操作的性能对大表来说是个大问题。MYSQL执行大部分修改表结构操作的方法是用新的表结构创建一个空表,从旧表中查出所有数据插入新表,然后删除旧表。这样操作可能需要花费很长时间,如果内存不足而表又很大,而且还有很多索引的情况下尤其如此。许多人都有这样的经验,ALTERTABLE操作需要花费数个小时甚至数天才能完成。
一般而言,大部分ALTERTABLE操作将导致MYSQL服务中断。对常见的场景,能使用的技巧只有两种:
一种是先在一台不提供服务的机器上执行ALTERTABLE操作,然后和提供服务的主库进行切换;
另外一种技巧就是“影子拷贝”。影子拷贝技巧是用要求的表结构创建一张新表,然后通过重命名和删表操作交换两张表。
不是所有的ALTERTABLE操作都会引起表重建。例如,有两种方法可以改变或删除一个列的默认值(一种方法很快,另一种则很慢)。
假如要修改电影的默认租赁期限,从三天改到五天。下面是很慢的方式:
mysql>ALTERTABLEfilmmodifycolumnrental_durationtinyint(3)notnulldefault5;
SHOWSTATUS显示这个语句做了1000次读和1000次插入操作。换句话说,它拷贝了整张表到一张新表,甚至列的类型、大小和可否为null属性都没有改变。
理论上,MYSQL可以跳过创建新表的吧步骤。列的默认值实际上存在表的.frm文件中,所以可以直接修改这个文件而不需要改动表本身。然而MYSQL还没有采用这种优化的方法,所以MODIFYCOLUMN操作都将导致表重建。
另外一种方法是通过ALTERCOLUMN操作来改变列的默认值;
mysql>ALTERTABLEfilmALTERCOLUMNrental_durationsetDEFAULT5;
这个语句会直接修改.frm文件而不涉及表数据。所以这个操作是非常快的。
只修改.frm文件
从上面的例子我们看到修改表的.frm文件是很快的,但MYSQL有时候会在没有必要的时候也重建表。如果愿意冒一些风险,可以让MYSQL做一些其他类型的修改而不用重建表。
注意下面要演示的技巧是不受官方支持的,也没有文档记录,并且也可能不能正常工作,采用这些技术需要自己承担风险。>建议在执行之前首先备份数据!
下面这些操作是有可能不需要重建表的:
移除(不是增加)一个列的AUTO_INCREMENT属性。
增加、移除,或更改ENUM和SET常亮。如果移除的是已经有行数据用到其值的常量,查询将会返回一个空字符串。
步骤:
创建一张有相同结构的空表,并进行所需要的修改(例如:增加ENUM常量)。
执行FLUSHTABLESWITHREADLOCK。这将会关闭所有正在使用的表,并且禁止任何表被打开。
交换.frm文件。
执行UNLOCKTABLES来释放第二步的读锁。
下面以给film表的rating列增加一个常量为例来说明。当前列看起来如下:
mysql>SHOWCOLUMNSFROMfilmLIKE'rating';
Field Type Null Key Default Extra
rating enum('G','PG','PG-13','R','NC-17') YES G
假设我们需要为那些对电影更加谨慎的父母们增加一个PG-14的电影分级:
mysql>CREATETABLEfilm_newlikefilm;
mysql>ALTERTABLEfilm_newmodifycolumnratingENUM('G','PG','PG-13','R','NC-17','PG-14')DEFAULT'G';
mysql>FLUSHTABLESWITHREADLOCK;
注意,我们是在常量列表的末尾增加一个新的值。如果把新增的值放在中间,例如:PG-13之后,则会导致已经存在的数据的含义被改变:已经存在的R值将变成PG-14,而已经存在的NC-17将成为R,等等。
接下来用操作系统的命令交换.frm文件:
/var/lib/mysql/sakila#mvfilm.frmfilm_tmp.frm
/var/lib/mysql/sakila#mvfilm_new.frmfilm.frm
/var/lib/mysql/sakila#mvfilm_tmp.frmfilm_new.frm
再回到Mysql命令行,现在可以解锁表并且看到变更后的效果了:
mysql>UNLOCKTABLES;
mysql>SHOWCOLUMNSFROMfilmlike'rating'\G
******************1.row*********************
Field:rating
Type:enum('G','PG','PG-13','R','NC-17','PG-14')
最后需要做的是删除为完成这个操作而创建的辅助表:
mysql>DROPTABLEfilm_new;
|