七 10

SQL去除重复删除重复数据（高效，大数据）

发布时间： 发布者：

MYSQL里有五百万数据，但大多是重复的，真实的就180万，于是想怎样把这些重复的数据搞出来，在网上找了一圈，好多是用NOT IN这样的代码，这样效率很低，自己琢磨组合了一下，找到一个高效的处理方式，用这个方式，五百万数据，十来分钟就全部去除重复了，请各位参考。

继续阅读全文 →

六 18

NTSE、TNT引擎研发之自动化测试实践

发布时间： 发布者：

软件自动化测试，是软件测试中的一类分支。自动化测试是把以人为驱动的测试行为转化为机器执行的一种过程。通常，在设计了测试用例并通过评审之后，由测试人员根据测试用例中描述的规程一步步执行测试，得到实际结果与期望结果的比较。在此过程中，为了节省人力、时间或硬件资源，提高测试效率，便引入了自动化测试的概念。

继续阅读全文 →

六 18

二分查找(Binary Search)需要注意的问题，以及在数据库内核中的实现

发布时间： 发布者：

本文通过一个二分查找的题目，以及同学们在解答题目中暴露出来的问题，分析了一个安全可靠高效的二分查找，应该注意哪些问题。并简要分析了数据库内核实现中的二分查找实现，希望对大家在以后设计二分查找算法时，有所帮助。​

继续阅读全文 →

六 02

InnoDB Memcached Plugin源码实现调研

发布时间： 发布者：

MySQL 5.6版本，新增了一个NoSQL的接口，通过将memcached嵌入到MySQL系统之中，用户可以直接使用memcached接口直接操作MySQL中的InnoDB表，绕过MySQL Server层面的SQL解析，优化，甚至绕过InnoDB Handler层，直接操作InnoDB内部的方法，从而达到更优的响应时间与效率。

继续阅读全文 →

六 02

SQL中的where条件，在数据库中提取与应用浅析

发布时间： 发布者：

一条SQL，在数据库中是如何执行的呢？相信很多人都会对这个问题比较感兴趣。当然，要完整描述一条SQL在数据库中的生命周期，这是一个非常巨大的问题，涵盖了SQL的词法解析、语法解析、权限检查、查询优化、SQL执行等一系列的步骤，简短的篇幅是绝对无能为力的。因此，本文挑选了其中的部分内容，也是我一直都想写的一个内容，做重点介绍：

给定一条SQL，如何提取其中的where条件？where条件中的每个子条件，在SQL执行的过程中有分别起着什么样的作用？

通过本文的介绍，希望读者能够更好地理解查询条件对于SQL语句的影响；撰写出更为优质的SQL语句；更好地理解一些术语，例如：MySQL 5.6中一个重要的优化——Index Condition Pushdown，究竟push down了什么？

继续阅读全文 →

六 02

从MySQL Bug#67718浅谈B+树索引的分裂优化

发布时间： 发布者：

今天，看到Twitter的DBA团队发布了其最新的MySQL分支：Changes in Twitter MySQL 5.5.28.t9，此分支最重要的一个改进，就是修复了MySQL 的Bug #67718：InnoDB drastically under-fills pages in certain conditions。关于此Bug的详细描述，以及如何重现此问题，可以阅读以上的Bug链接，以下简单描述下此Bug对应的问题：

InnoDB的索引分裂策略，在特定的情况下，索引页面的分裂存在问题，导致每个分裂出来的页面，仅仅存储一条记录，页面的空间利用率极低。

此Bug引起了我的兴趣，因此准备跟大家简单聊聊B+树索引的结构、B+树的分裂、B+树分裂操作的优化、Bug #67718的成因，以及个人对如何修复此Bug的一些建议等。

继续阅读全文 →

五 31

我加入 MySQL 的 5 年时间

发布时间： 发布者：

加入MySQL社区之后，人们通常会在迎来一些高兴的周年纪念的时候写点博文。对那些很老的家伙来说的话，基本就是指加入MySQL工作的日子了。对我来说，那是2008年一月。因为月份没记对，我之后也没写什么东西，但是我决定抓住机会现在开始写点东西。

继续阅读全文 →