设为首页 加入收藏

TOP

MySQL基于时间字段进行分区的方案总结
2015-12-15 22:18:12 来源: 作者: 【 】 浏览:9
Tags:MySQL 基于 时间 进行 分区 方案 总结

MySQL支持的分区类型一共有四种:RANGE,LIST,HASH,KEY。其中,RANGE又可分为原生RANGE和RANGE?COLUMNS,LIST分为原生LIST和LIST?COLUMNS,HASH分为原生HASH和LINEAR HASH,KEY包含原生KEY和LINEAR HASH。关于这些分区之间的差别,改日另写文章进行阐述。


最近,碰到一个需求,要对表的时间字段(类型:datetime)基于天进行分区。于是遍历MySQL官方文档分区章节,总结如下:


实现方式


主要是以下几种:


1. 基于RANGE


2. 基于RANGE?COLUMNS


3. 基于HASH


测试数据?


为了测试以上三种方案,特构造了100万的测试数据,放在test表中,test表只有两列:id和hiredate,其中hiredate只包含10天的数据,从2015-12-01到2015-12-10。具体信息如下:


测试的维度


测试的维度主要从两个方面进行,


一、分区剪裁


针对特定的查询,是否能进行分区剪裁(即只查询相关的分区,而不是所有分区)


二、查询时间


鉴于该批测试数据是静止的(即没有并发进行的insert,update和delete操作),数据量也不太大,从这个维度来考量貌似意义也不是很大。


因此,重点测试第一个维度。


基于RANGE的分区方案


在这里,选用了TO_DAYS函数


插入数据并查看特定查询的执行计划


注意执行计划中的partitions的内容,只查询了p7,p8,p9,p10三个分区,由此来看,使用to_days函数确实可以实现分区裁剪。


基于RANGE?COLUMNS的分区方案


RANGE COLUMNS可以直接基于列,而无需像上述RANGE那种,分区的对象只能为整数。


创表语句如下:


插入数据并查看上述查询的执行计划


同样,使用该分区方案也实现了分区剪裁。


基于HASH的分区方案


因HASH分区对象同样只能为整数,所以我们无法像上述RANGE?COLUMNS那种直接引用列,在这里,同样用了TO_DAYS函数进行转换。


创表语句如下:


插入数据并查看上述查询的执行计划


不难看出,使用hash分区并不能有效的实现分区裁剪,至少在本例,基于天的需求中如此。


以上三种方案都是基于datetime的,那么,对于timestamp类型,又该如何选择呢?


事实上,MySQL提供了一种基于UNIX_TIMESTAMP函数的RANGE分区方案,而且,只能使用UNIX_TIMESTAMP函数,如果使用其它函数,譬如to_days,会报如下错误:“ERROR 1486 (HY000): Constant, random or timezone-dependent expressions in (sub)partitioning function are not allowed”。


而且官方文档中也提到“Any other expressions involving TIMESTAMP values are not permitted. (See Bug #42849.)”。


下面来测试一下基于UNIX_TIMESTAMP函数的RANGE分区方案,看其能否实现分区裁剪。


针对TIMESTAMP的分区方案


创表语句如下:


插入数据并查看上述查询的执行计划


同样也能实现分区裁剪。


总结:


1. 经过对比,个人倾向于第二种方案,即基于RANGE COLUMNS的分区实现。


2. 在5.7版本之前,对于DATA和DATETIME类型的列,如果要实现分区裁剪,只能使用YEAR() 和TO_DAYS()函数,在5.7版本中,又新增了TO_SECONDS()函数。


3. 其实LIST也能实现基于天的分区方案,但在这个需求上,相比于RANGE,还是显得很鸡肋。


4. TIMESTAMP类型的列,只能基于UNIX_TIMESTAMP函数进行分区,切记!


参考:


http://dev.mysql.com/doc/refman/5.7/en/partitioning.html?


】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
分享到: 
上一篇CentOS7安装配置Redis-3.0.0 下一篇MySQL中有关TIMESTAMP和DATETIME..

评论

帐  号: 密码: (新用户注册)
验 证 码:
表  情:
内  容: