当前位置: 首页 > news >正文

MySQL分区表使用保姆级教程

分区表是什么

分区表就是把一张表的数据,按照设置好的条件,单独存储在磁盘的不同位置,也就是不同分区的数据是独立的,互不影响的。

在没有分区表的情况下,一张表的数据就是存储在一个文件中,用了分区表之后,单张表的数据会在硬盘上分开存储。对表的操作来说,没有什么区别。

分区表的优点

  • 更少的数据检索范围
  • 拆分超级大的表,将部分数据加载至内存
  • 分区表的数据更容易维护
  • 分区表数据文件可以分布在不同的硬盘上,并发 IO
  • 减少锁的范围,避免大表锁表
  • 可独立备份,恢复分区数据

什么时候创建分区表

当单张表的数据量较大,且因为数据量大,导致查询无法满足要求。

不想做分库分表这样大的改动。

未创建分区表的情况

看下如果不创建分区表,查询是怎么样的,可以和创建分区表的情况做对比,这样更好理解。

CREATE TABLE test_partition ( id int(11) NOT NULL, create_time datetime NOT NULL, cyear int, PRIMARY KEY (id,create_time , cyear) ) ENGINE=InnoDB DEFAULT CHARSET=utf8; insert into test_partition values (1,"20130722000000",2013); insert into test_partition values (2,"20140722000000",2014); insert into test_partition values (3,"20150722000000",2015); insert into test_partition values (4,"20160722000000",2016); insert into test_partition values (5,"20170722000000",2017); insert into test_partition values (6,"20180722000000",2018); insert into test_partition values (7,"20190722000000",2019); insert into test_partition values (8,"20200722000000",2020); insert into test_partition values (9,"20210722000000",2021); insert into test_partition values (10,"20220722000000",2022);

执行上面的SQL,创建表,并插入记录。

查询年份大于2016的记录,语句如下:

这个查询,如果想优化,首先想到的就是在年份字段上添加索引,因为年份字段作为查询条件的一个字段。

但实际操作就会发现,添加了索引,最终查询并没有使用这个索引,因为MySQL执行器会推断,当结果集的数量占总记录数的比例较大时,不会使用索引,因为无论是否使用索引,扫描的记录总数差不多。

解决方法就是在磁盘的检索范围上进行优化,那就是创建分区表来解决。

分区表的创建

执行下面的语句,可以删除上面创建的表,重新创建带有分区的表。

drop table test_partition; CREATE TABLE test_partition ( id int(11) NOT NULL, create_time datetime NOT NULL, cyear int, PRIMARY KEY (id,create_time , cyear) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 PARTITION BY RANGE (cyear) ( PARTITION y14before VALUES LESS THAN (2014) , PARTITION y15 VALUES LESS THAN (2015) , PARTITION y16 VALUES LESS THAN (2016) , PARTITION y17 VALUES LESS THAN (2017) , PARTITION y18 VALUES LESS THAN (2018) , PARTITION y19 VALUES LESS THAN (2019) , PARTITION y20 VALUES LESS THAN (2020) , PARTITION y20after VALUES LESS THAN maxvalue );

PARTITION BY RANGE 表示根据字段进行范围分区。

PARTITION就是分区表的关键字,y15代表分区的名称,LESS THAN条件。

当进行数据插入时,年份为2015年的数据,就会存储在y15这个分区中。年份为2016的数据就会存储在y16这个分区中。以此类推。

分区表的使用

插入数据

insert into test_partition values (1,"20130722000000",2013); insert into test_partition values (2,"20140722000000",2014); insert into test_partition values (3,"20150722000000",2015); insert into test_partition values (4,"20160722000000",2016); insert into test_partition values (5,"20170722000000",2017); insert into test_partition values (6,"20180722000000",2018); insert into test_partition values (7,"20190722000000",2019); insert into test_partition values (8,"20200722000000",2020); insert into test_partition values (9,"20210722000000",2021); insert into test_partition values (10,"20220722000000",2022);

可以看到在数据库安装目录的data目录中,test这个文件夹下面有这样一些文件,这就是test数据库中test_partition表的不同分区数据。文件名称对应的就是表名称+分区的名称。

在进行查询时,MySQL会根据查询条件,从指定的分区表中获取数据。这样就缩小了数据的检索范围。

查询这个执行计划,可以看到partitions字段值就是数据涉及到的分区名称。MySQL只去查找涉及到的分区,然后从中获取数据,并不会把所有表数据全部去扫描,从物理层面减少扫描范围。

因为查询条件是年份大于2016,所以只查询2017及其之后年份的数据,2017年的数据存储在y18的分区中,所有就可以看到y18,y19,y20after,这三个分区。

分区表数据统计

通过下面的查询,可以看到表的每个分区中数据分布情况:

select PARTITION_NAME as "分区", TABLE_ROWS as "行数" from information_schema.partitions where table_schema="test" #数据库名称 and table_name="test_partition"; #表名

分区表的使用限制

  1. 查询必须包含分区列(上面例子中的cyear列),不允许对分区列进行计算。

  2. 分区列必须是数字类型。

  3. 分区表不支持建立外键索引。

  4. 建表时主键必须包含所有的列(上面例子中,PRIMARY KEY (id,create_time , cyear))。

  5. 最多1024个分区。

http://www.cnnetsun.cn/news/41465.html

相关文章:

  • cjdns网络服务发现机制深度解密:构建加密网络中的智能寻址系统
  • 【无标题】激活函数应该具有哪些特征
  • 深入解析Oracle SQL调优健康检查工具(SQLHC):从原理到实战优化
  • 5分钟上手shUnit2:Shell脚本单元测试终极指南
  • uni-app新手避坑指南:从零开始搭建跨平台应用
  • 深入浅出 ES Module
  • wangEditor处理ppt动画效果转网页兼容
  • 深度残差网络在智能垃圾分类中的技术实践与性能分析
  • wangEditor导入MathType公式保留矢量格式
  • Node.js BFF层实战:对接天远综合多头借贷/逾期/欺诈聚合接口
  • Day11 >> 150、逆波兰表达式求值 + 239、滑动窗口最大值 + 347、前K个高频元素
  • System Informer 终极指南:从零掌握Windows系统监控神器
  • 20、集群节点与实例的添加和删除操作指南
  • 5大React动画库生态对比:从入门到精通的全栈解决方案
  • 2、Oracle Real Application Clusters (RAC):特性、成本与效益解析
  • Phi-2模型完全攻略:让27亿参数的小巨人成为你的AI助手
  • 30分钟掌握Tauri:用Rust构建你的第一个桌面应用
  • WeChatTweak-macOS开源项目深度参与指南
  • NootRX:让AMD RDNA 2显卡在macOS上完美运行
  • DBeaver崩溃救星:3步紧急恢复SQL脚本的完整方案
  • 项目效率翻倍,做对了什么?
  • 少儿编程考试路径规划:考级与竞赛时间如何平衡?
  • 火星漫游车Rocker-Bogie悬挂系统核心技术深度解析与实战指南
  • ImmortalWrt网络流量监控完全指南:快速排查网络异常与优化带宽分配
  • 青少年编程考级的三大核心价值:目标建立与能力提升
  • 大疆(DJI)前端开发岗位面试经验总结与备战指南
  • AI难?看涂鸦智能、Lark和德勤中国如何借亚马逊云科技突围
  • Kimi-K2-Instruct模型部署指南:从快速入门到生产级优化
  • 企业级系统监控UI架构设计与性能优化实战
  • 多模态智能体如何重塑人机交互:UI-TARS-1.5的三大技术突破与应用前景