因为线上某个应用表分区太多,直接导致遍历表或者dump数据的时候导致内存耗尽死机。原因是Innodb的数据字典不会释放内存,会将所有表和分区的信息记录在内存当中,当表数量或者分区数到达一定数量之后(经验值:约10万张表或者10万个表分区,占用将近1G大小的内存),会导致内存耗尽。
my.cnf 配置参数: innodb_additional_mem_pool_size
查看数据字典使用多少内存:
SHOW engine innodb STATUS\\G
Dictionary memory allocated xxxxxxx
针对这种情况,Vadim提供了一个限制数据字典占用内存大小(Limiting InnoDB Data Dictionary)的补丁,用来限制数据字典占用内存的大小,采用LRU淘汰算法,只保留最新使用的表信息。