MySQL中文实验室 -- IT技术博客大学习 -- 共学习共进步！

• MySQL driver(驱动) liblbmysql for Go1

Go语言1.0出来之后,原来可用的MySQL驱动在新版本上基本不可用了,于是这几天自己写了个简单的MySQL的驱动,暂不支持prepare,没有implement sql/driver.　或许有能用的上的朋友,所以分享出来.　先介绍用法,后面提供下载链接.

• 由CSDN泄密想到的:MySQL数据库验证过程的改进、密码存储及验证方法的总结

这几天CSDN数据库明文密码泄密闹得满城风雨，人人自危。大家开始关注网络安全和隐私问题。由这次的问题，对加密验证过程我也思考过，有没有一套相对安全的存储和验证方法？这里我根据各种验证方法，确实总结了一套可行且相对安全的存储和验证方法，且看我细细道来，最后提出MySQL当前验证方法的改进。

• Raid1+0 stripe size for MySQL InnoDB

要理解Raid 1+0，我们首先要先理解Raid 0，看下图：左图为 4kb stripe size；右图为 64kb stripe size 存储文件大小：红色:4kiB，蓝色:20kiB，绿色:100kiB，紫色:500kiB Raid 0 准确的来说应该称 AID 0 大家可以看到，如果stripe size设置过大，在单线程的情况下起不到提速作用。而设置过小又会产生多次IO操作。因此我们通过简化模型，将大部分请...

• MySQL5.5复制/同步的新特性及改进

半年之前我有幸参加了MySQL2010用户大会，Oracle/Sun在会上公布了MySQL5.5的新特性，这次MySQL5.5改进的地方非常之多，当中引入的Google patch for MySQL中的半同步Semi-synchronous Replication，一个可用于高可用解决方案的新特性。谭俊青@MySQL实验室 MySQL5.5的在复制/同步方面的改进：保证主从服务器上数据的一致性（同步）能立检测到复制的异常 Crashed Salve能自动从错误中恢复同步在环形复制中用户能够指定跳过某实例事...

• Handler-Socket Plugin for MySQL

记得半年多前写过MySQL vs NoSQL ，且一直以来我比较坚持用数据库存储K/V数据，因为不只是对数据安全等能提供保障，主要是发现大部分系统的qps根本就没那么高，能上4k的水平已经很少了，这点MySQL完全可以满足，因为优化好的K/V请求，在MySQL的SQL层上能实现每核心5k左右的qps，而这一数据在HandlerSocket出来之后，得到了更大的提升。 HandlerSocket plugin for MySQL 已经出来一段时间了, 鉴于HandlerSocket和InnoDB的健壮、安全...

• MySQL Cluster Manager 工作原理、安装及使用

MySQL Cluster使用不那么广泛，除了自身构架因素、适用的业务有限之外，另一个重要的原因是其安装配置管理相对复杂繁琐，总共有几十部操作，需要DBA花费几个小时才能搭建或升级完成。MySQL Cluster 7.1推出了MySQL Cluster Manager,MySQL Cluster的安装、升级管理等操作，将DBA原本需要几个小时的工作，节省到通过若干个命令即可完成，还能避免操作的失误。MySQL Cluster Manager的基本工作原理如下图所示：在MySQL Cluster将要被...

• MySQL锁管理(并发锁,行锁,表锁,预加锁,全局锁等等)

1. MySQL中并发和隔离控制机制 Meta-data元数据锁：在table cache缓存里实现的，为DDL（Data Definition Language）提供隔离操作。一种特别的meta-data元数据类型，叫Name Lock。（SQL层）表级table-level数据锁（SQL层）存储引擎特有机制 ― row locks行锁，page locks页锁，table locks表级，版本控制（在引擎中实现）全局读锁 ― FLUSH TABLES WITH READ LOCK（SQL层） (...)阅读全文MySQL锁管理(并发...

• Web前端优化

各浏览器并发下载数列表： Browser HTTP/1.1 HTTP/1.0 IE 6,7 2 4 IE 8 6 6 Firefox 2 2 8 Firefox 3 6 6 Safari 3,4 4 4 Chrome 1,2 6 ? Chrome 3 4 4 Opera 9.63,10.00alpha 4 4 随着宽带的普及，为充分利用用户的带宽，提升用户体验，可设置多个子域名。 Javascript和css尽可能从页面中分离出去，作为独立的文件。为了减小header头大小，静态文件尽量用其他不带cookie的域名提供下载（当然还要兼顾到DNS解析时间）。如：www.m...

• TCP keep-alive & connection pool

当用户通过浏览器打开一个页面的时候，最小情况下，只需要2个packet，一次是请求(http get request)，一次是回应(response from server)。但是这里没有计入TCP链接的建立（3 packets）和关闭(4packets)，当然每个packet都需要ACK，但是ACK信息一般直接包含在回应的packet里，为了量化方便，这里忽略掉。

• Two-phase commit(2PC) 与MySQL Cluster

Two-phase commit(两阶段提交, 文中用2PC代替)是一种比较精简的一致性算法/协议。在事务处理、数据库和计算机网络中，两阶段提交协议提供了分布式设计中的数据一致性的保障，整个事务的参与者要么一致性全部提交成功，要么全部回滚。MySQL Cluster内部数据的同步就是用的2PC协议。 by ivan@mysqlab.net 故名思意，2PC算法包含两个阶段：commit-request 和 commit。第一阶段(commit-request)：组织者(coordinator)负责询问事务的...

• linux下shell命令的常用快捷键

下面是一些shell的常用快捷键,快捷键玩熟悉了在一定程度上是可以提高工作效率滴… Ctrl + a 切换到命令行开始 Ctrl + e 切换到命令行末尾 Ctrl + l 清除屏幕内容 Ctrl + u 清除光标之前的内容 Ctrl + k 清除光标之后的内容 Ctrl + h 类似于退格键 Ctrl + r 在历史命令中查找（这个非常好用，输入关键字就调出以前的命令了） Ctrl + c 终止命令 Ctrl + d 退出shell Ctrl + z 转入后台运行...

• MySQL vs NoSQL 效率与成本之争

　　最近Twitter、DIGG等计划换用基于key-value的NoSQL数据库(e.g:Cassandra)，之所以有如此动向是因为基于MySQL + sharding + cache的构架随着数据量爆炸式增长，重构的人力成本太高，换用扩展性更好的NoSQL数据库，以达到控制人力成本的目的，从而减少总体成本。　　随着数据量和访问量的增长，网站构架大致有这么几个发展阶段(以PHP+MySQL+Memcached为例)： (...)阅读全文MySQL vs NoSQL 效率与成本之争 (49 words) (c) 谭...

• MySQL半同步存在的问题

　　去年提到过我做的一个MySQL HA高可用方案，就是利用了Google的半同步补丁来加以实现的。而现在MySQL5.5中已经集成了semi-sync replication的功能，那么我们可以放心用它和其他组件及服务判断程序来实现我们的高可用解决方案。但是这里还存在一点瑕疵，需要注意。 By ivan@mysqlab.net (...)阅读全文MySQL半同步存在的问题 (4 words) (c) 谭俊青发布在 MySQL实验室, 2010. 可以任意转载, 但转载时务必以超链接形式标明文...

• Memcached and MySQL

　　相信很多开发人员接触过memcached,而且我认识的朋友当中有的是经常使用。那么在结合数据库，在对数据库内容做缓存的时候什么情况下使用memcached却不甚了解。有些朋友问到MySQL有自己的Query cache，为什么还要用memcached？

• Blob/Text字段类型在MySQL Cluster中的处理

　　MySQL Cluster ndb 引擎每行存储的实际长度最大为8052个字节。Blob和Text字段在ndb engine中只存储前面的256个字节。超过256自己部分存储在另外的隐藏表里面。根据字段类型，隐藏表分3种大小(chunk size)。 Blob/Text 2000B MediumBlob/MediumText 4000B LongBlob/LongText 8000B 　　假如一个LongBlob字段是10,000个字节，那么需要2个chunk，第一个存储8000字节，另外一个存储剩下的2000字节。　　因此为了提高效率，如...

• MySQL库目录下db.opt文件的作用

　　细心的朋友可能会发现有时候在某些库目录下有个 db.opt 文件，那这个文件是干什么用的呢？如果你用vi等编辑器打开看的话，内容很简单，是用来记录该库的默认字符集编码和字符集排序规则用的。也就是说如果你创建数据库指定默认字符集和排序规则，那么后续创建的表如果没有指定字符集和排序规则，那么该新建的表将采用db.opt文件中指定的属性。

• MySQL Cluster致命缺点

　　最近一直在学习研究MySQL Cluster，今天正好也看到消息说支付宝在测试IBM DB2 Cluster，16个数据居节点，1个管理节点，采用万兆网卡连接。DB2 Cluster跟MySQL Cluster采用同样的share-nothing构架，网络对它来说至关重要。　　但是我这里要说的是，虽然MySQL Cluster发展到今天已经取得很大的成就，性能翻了好几倍，也开始支持磁盘存储(非主键、索引)，但是它有致命的弱点：不支持真正的ACID(整个机群down掉的时候，最新GCP...

• MySQL半同步 : MySQL 5.5 Released

　　MySQL 5.5第一个版本释出，基于MySQL5.4，性能相对于当前MySQL5.0、5.1有很大的提升，更让人可喜的是MySQL5.5内置了Google的半同步（semi-sync-replication）补丁,以此可以搭建一个相对来说比较完美的MySQL高可用方案,之前我已经在“MySQL新版(5.x)及特性”中提到过，很是让人期待！

• Innodb分表太多或者表分区太多，会导致内存耗尽而宕机

因为线上某个应用表分区太多，直接导致遍历表或者dump数据的时候导致内存耗尽死机。原因是Innodb的数据字典不会释放内存，会将所有表和分区的信息记录在内存当中，当表数量或者分区数到达一定数量之后(经验值:约10万张表或者10万个表分区，占用将近1G大小的内存)，会导致内存耗尽。 my.cnf 配置参数: innodb_additional_mem_pool_size 查看数据字典使用多少内存: SHOW engine innodb STATUS\\G Dictionary memory allocated xxxxxx...