【问题描述】:
版本:MySQL 5.6.36 (以上的版本都可能出现)
行为:对某些访问频繁的大表做Online DDL
现象:
ERROR 1799 (HY000): Creating index 'GEN_CLUST_INDEX' required more than 'innodb_online_alter_log_max_size' bytes of modification log. Please try again.
比如:
mysql> ALTER TABLE a ENGINE=innodb;
ERROR 1799 (HY000): Creating index 'GEN_CLUST_INDEX' required more than 'innodb_online_alter_log_max_size' bytes of modification log. Please try again.
mysql> ALTER TABLE a DROP idx_name;
ERROR 1799 (HY000): Creating index 'idx' required more than 'innodb_online_alter_log_max_size' bytes of modification log. Please try again.
只要是DDL相关的,就可能遇到这样的问题,比如在optimize table时:
mysql> OPTIMIZE TABLE a;
+--------+----------+----------+-------------------------------------------------------------------+
| Table | Op | Msg_type | Msg_text |
+--------+----------+----------+-------------------------------------------------------------------+
| test.a | optimize | note | Table does not support optimize, doing recreate + analyze instead |
| test.a | optimize | error | Creating index 'FTS_DOC_ID_INDEX' required more than 'innodb_online_alter_log_max_size' bytes of modification log. Please try again. |
| test.a | optimize | status | OK |
+--------+----------+----------+-------------------------------------------------------------------+
2 rows in set (18.13 sec)
虽然optimize对innodb表没什么用,但是仍然会抛出该错误
那么查看一下手册,可以得知:
innodb_online_alter_log_max_size控制在用于在Online DDL操作时的一个临时的日志文件的上限值大小。
该临时的日志文件存储了在DDL时间内,dml操作的记录。这个临时的日志文件依照innodb_sort_buffer_size的值做扩展。
如果该日志超过了innodb_online_alter_log_max_size的最大上限,DDL操作则会抛出失败,并且回滚所有未提交的DML操作。
反过来说,该值如果设置更高,则可以允许在做Online DDL时,有更多的DML操作发生。
但因此带来的问题就是,在DDL做完之后,需要更多时间来锁表和应用这些日志。
另外对于某些DDL操作,比如
ADD INDEX/COLUMN,则可以通过调整innodb_sort_buffer_size的大小来加快操作速度。
但是实际上分配的内存为3倍的innodb_sort_buffer_size值。
innodb_online_alter_log_max_size和innodb_sort_buffer_size均为5.6 Online DDL的新参数。
【解决方案】:
知道这个参数控制的是什么东西,就好解决了。
临时调大该值,此处改成了256MB:
mysql> SET GLOBAL innodb_online_alter_log_max_size=256*1024*1024;
Query OK, 0 rows affected (0.03 sec)
该值默认为128MB,还是建议在做完DDL之后再将其改为默认值,也就是134217728。