可以用说用到MySQL的地方,只要数据量一大, 马上就会遇到一个问题,要分库分表.

     这里引用一个问题为什么要分库分表呢?MySQL处理不了大的表吗?

     其实是可以处理的大表的.我所经历的项目中单表物理上文件大小在80G多,单表记录数在5亿以上,而且这个表属于一个非常核用的表:朋友关系表.

    但这种方式可以说不是一个最佳方式. 因为面临文件系统如Ext3文件系统对大于大文件处理上也有许多问题.

     这个层面可以用xfs文件系统进行替换.但MySQL单表太大后有一个问题是不好解决: 表结构调整相关的操作基本不在可能.所以大项在使用中都会面监着分库分表的应用.

    从Innodb本身来讲数据文件的Btree上只有两个锁, 叶子节点锁和子节点锁,可以想而知道,当发生页拆分或是添加新叶时都会造成表里不能写入数据.

     所以分库分表还就是一个比较好的选择了.

    那么分库分表多少合适呢?

     经测试在单表1000万条记录一下,写入读取性能是比较好的. 这样在留点buffer,那么单表全是数据字型的保持在800万条记录以下, 有字符型的单表保持在500万以下.

    如果按 100库100表来规划,如用户业务:

     500万*100*100 = 50000000万 = 5000亿记录.

    心里有一个数了,按业务做规划还是比较容易的.

建议继续学习：

1. 分表优化：千万级数据的插入方法    (阅读：1798)