工程造价信息网站,网站后台 源码,南京网站设计是什么,黑龙江城乡建设厅网站一.InnoDB逻辑存储结构首先要先介绍一下InnoDB逻辑存储结构和区的概念#xff0c;它的所有数据都被逻辑地存放在表空间#xff0c;表空间又由段#xff0c;区#xff0c;页组成。段段就是上图的segment区域#xff0c;常见的段有数据段、索引段、回滚段等#xff0c;在In…一.InnoDB逻辑存储结构首先要先介绍一下InnoDB逻辑存储结构和区的概念它的所有数据都被逻辑地存放在表空间表空间又由段区页组成。段段就是上图的segment区域常见的段有数据段、索引段、回滚段等在InnoDB存储引擎中对段的管理都是由引擎自身所完成的。区区就是上图的extent区域区是由连续的页组成的空间无论页的大小怎么变区的大小默认总是为1MB。为了保证区中的页的连续性InnoDB存储引擎一次从磁盘申请4-5个区InnoDB页的大小默认为16kb即一个区一共有64(1MB/16kb16)个连续的页。每个段开始先用32页(page)大小的碎片页来存放数据在使用完这些页之后才是64个连续页的申请。这样做的目的是对于一些小表或者是undo类的段可以开始申请较小的空间节约磁盘开销。页页就是上图的page区域也可以叫块。页是InnoDB磁盘管理的最小单位。默认大小为16KB可以通过参数innodb_page_size来设置。常见的页类型有数据页undo页系统页事务数据页插入缓冲位图页插入缓冲空闲列表页未压缩的二进制大对象页压缩的二进制大对象页等。二.分区概述分区这里讲的分区此“区”非彼“区”这里讲的分区的意思是指将同一表中不同行的记录分配到不同的物理文件中几个分区就有几个.idb文件不是我们刚刚说的区。MySQL在5.1时添加了对水平分区的支持。分区是将一个表或索引分解成多个更小更可管理的部分。每个区都是独立的可以独立处理也可以作为一个更大对象的一部分进行处理。这个是MySQL支持的功能业务代码无需改动。要知道MySQL是面向OLTP的数据它不像TIDB等其他DB。那么对于分区的使用应该非常小心如果不清楚如何使用分区可能会对性能产生负面的影响。MySQL数据库的分区是局部分区索引一个分区中既存了数据又放了索引。也就是说每个区的聚集索引和非聚集索引都放在各自区的(不同的物理文件)。目前MySQL数据库还不支持全局分区。无论哪种类型的分区如果表中存在主键或唯一索引时分区列必须是唯一索引的一个组成部分。三.分区类型目前MySQL支持一下几种类型的分区RANGE分区LIST分区HASH分区KEY分区。如果表存在主键或者唯一索引时分区列必须是唯一索引的一个组成部分。实战十有八九都是用RANGE分区。RANGE分区RANGE分区是实战最常用的一种分区类型行数据基于属于一个给定的连续区间的列值被放入分区。但是记住当插入的数据不在一个分区中定义的值的时候会抛异常。RANGE分区主要用于日期列的分区比如交易表啊销售表啊等。可以根据年月来存放数据。如果你分区走的唯一索引中date类型的数据那么注意了优化器只能对YEAR()TO_DAYS()TO_SECONDS()UNIX_TIMESTAMP()这类函数进行优化选择。实战中可以用int类型那么只用存yyyyMM就好了。也不用关心函数了。CREATE TABLE m_test_db.Order (id INT NOT NULL AUTO_INCREMENT,partition_key INT NOT NULL,amt DECIMAL(5) NULL,PRIMARY KEY (id, partition_key))PARTITION BY RANGE(partition_key)PARTITIONS 5(PARTITION part0 VALUES LESS THAN (201901),PARTITION part1 VALUES LESS THAN (201902),PARTITION part2 VALUES LESS THAN (201903),PARTITION part3 VALUES LESS THAN (201904),PARTITION part4 VALUES LESS THAN (201905)) ;这时候我们先插入一些数据INSERT INTO m_test_db.Order (id, partition_key, amt) VALUES (1, 201901, 1000);INSERT INTO m_test_db.Order (id, partition_key, amt) VALUES (2, 201902, 800);INSERT INTO m_test_db.Order (id, partition_key, amt) VALUES (3, 201903, 1200);现在我们查询一下通过EXPLAIN PARTITION命令发现SQL优化器只需搜对应的区不会搜索所有分区如果sql语句有问题那么会走所有区。会很危险。所以分区表后select语句必须走分区键。以下3种不是太常用就一笔带过了。LIST分区LIST分区和RANGE分区很相似只是分区列的值是离散的不是连续的。LIST分区使用VALUES IN因为每个分区的值是离散的因此只能定义值。HASH分区说到哈希那么目的很明显了将数据均匀的分布到预先定义的各个分区中保证每个分区的数量大致相同。KEY分区KEY分区和HASH分区相似不同之处在于HASH分区使用用户定义的函数进行分区KEY分区使用数据库提供的函数进行分区。四.分区和性能一项技术不是用了就一定带来益处。比如显式锁功能比内置锁强大你没玩好可能导致很不好的情况。分区也是一样不是启动了分区数据库就会运行的更快分区可能会给某些sql语句性能提高但是分区主要用于数据库高可用性的管理。数据库应用分为2类一类是OLTP(在线事务处理)一类是OLAP(在线分析处理)。对于OLAP应用分区的确可以很好的提高查询性能因为一般分析都需要返回大量的数据如果按时间分区比如一个月用户行为等数据则只需扫描响应的分区即可。在OLTP应用中分区更加要小心通常不会获取一张大表的10%的数据大部分是通过索引返回几条数据即可。比如一张表1000w数据量如果一句select语句走辅助索引但是没有走分区键。那么结果会很尴尬。如果1000w的B树的高度是3现在有10个分区。那么不是要(33)*10次的逻辑IO(3次聚集索引3次辅助索引10个分区)。所以在OLTP应用中请小心使用分区表。在日常开发中如果想查看sql语句的分区查询结果可以使用explain partitions select sql来获取partitions标识走了哪几个分区。mysqlexplain partitions select * from TxnList where startTime2016-08-25 00:00:00 and startTime--------------------------------------------------------------------------------------------------------------| id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | Extra |--------------------------------------------------------------------------------------------------------------| 1 | SIMPLE | ClientActionTrack | p20160825 | ALL | NULL | NULL | NULL | NULL | 33868 | Using where |--------------------------------------------------------------------------------------------------------------1 row in set (0.00 sec)【编辑推荐】【责任编辑庞桂玉 TEL(010)68476606】点赞 0
