首页 > 代码库 > MySQL分区技术 (一)
MySQL分区技术 (一)
4:MySQL 分区技术(是mysql 5.1以版本后开始用->是甲骨文mysql技术团队维护人员以插件形式插入到mysql里面的技术) 目前,针对海量数据的优化主要有2中方法: 1:大表拆成小表的方式(物理上) 一:垂直分表->一张垂直切成几张 二:水平分表(一般重点)->横切,意思就是一张表有100个数据横切10张表,一张表存10条(字段一致) 2:SQL语句的优化(可以通过增加索引等来调整,但是数据量大的增大会导致索引的维护代价增大) 水平分区技术将一个表拆成多个表,比较常用的方式是将表中的记录按照某种hash算法进行拆分,简单的拆分方法如取摸 方式。同样,这种分区方法也必须对前端的应用程序中的SQL进行修改方可以使用。而且对于一个SQL,它可能会修改两个 表,那么你必须地写出2个SQL语句从而可以完成一个逻辑事务,使得程序的判断逻辑越来越复杂,这样也导致程序的维护代价 高,也就失去了采用数据库的优势。 *因此:分区技术可以有力地避免如上的弊端,成为解决海量数据存储的有力方法。 分区技术: ->>有效解决了:物理上拆分多个表,逻辑上操作一个表表明不变 ->>MySQL分区技术介绍(*主要用的是range 和 list 分区*): -----分区在逻辑上是一张表,在硬件/物理上是多张表,就是拆分表索引和数据----- MySQL的分区技术不同与之前的分表技术,它与水平分表有点类似,但是它在逻辑层进行的水平分表, 对与应用程序而言它还是一张表, MySQL5.1版本后有4中分区类型: 一:RANGE分区(用的最多):基于属于一个给定连续区间的列值(字段),把多行分配给分区 -->基于女字段为参考点来进行分区 --将一个表拆分成:索引文件,数据文件分片存储 二:LIST分区:类似于按range分区,区别在于list分区是基于列值匹配一个离散值集合中的某个值来进行选择(列里面的值是固定值时候来进行分区,而且是枚举类型的值适合用list分区 -->比如说 性别:男,女) 三:HASH分区:基于用户定义的表达式的返回值来进行选择的分区,改表达式使用将要插入到表中的这些行的 列值计算,这个函数可以包含MySQL中有效的、产生负整数值的任何表达式 --->把每次插入的数据随机的平均的分配到多个分区里面,最终多个分区里面的数据时平均分配的,但是每个分区里面的数值肯能不太一样,因为是随机分配的(一般可以用来做MySQL分区的测试来使用) 四:KEY分区:类似于按hash分区,区别在于key分区只支持计算一列或多列,且MySQL服务器提供其自身的哈希函数 测试一下(测试用hash类型的):->myisam增删改查的速度快 create table t2(id int)engine=myisam partition by hash(id) partitions 5; ->能后当你插入数据的时候就会随机分配插入个个分区中 建立一个存储 \d // ->修改结束符号 之前是;号改成 // create procedure p5() begin set @i=1; while @i<100000 do insert into t4 values(@i); set @i=@i+1; end while; end // 执行刚才建立的存储 call p3() ->表p3就插入了9999条数据 innodb的数据结构: 分为:共享表空间及其独占表空间 一:innodb表结构共享表空间不能做成分区表: 所有文件的数据和索引都在ibddata1(比如你建了2个表会对应生成frm文件,但是2个表的所有数据和索引全部在这个文件里面共用,所有不能对表做正真的分区,初始值是10M) 原因:数据和索引全都是放在一个文件里面 .ibddata1文件 二:innodb表结构要想做出分区表必须是“独占表空间” 原因:数据和索引全都是独立的一个文件 开启独占空间:(*必须配置文件中开启文件才能做出独占表空间,才能做成分区表*) innodb_data_home_dir = C:\mysql\data innodb_data_file_path = ibdata1:10M:autoextend innodb_log_group_home_dir = C:\mysql\data innodb_file_per_table=1 ->配置文件中innodb下方加上 重启:MySQL -->pkill mysqld 关闭进程 重新启动MySQL-bin/mysqld_safe --user=mysql & 测试: create table t4(id int)engine=innodb partition by RANGE(id)( partition p0 values less than(10000), partition p1 values less than(20000), PARTITION p2 VALUES less than MAXVALUE); 能后你在创建innodb类型的数据表后,你会发现建一个x表就有x.frm x.ibd文件,就不会和其他表放到一起从而做表分区 *重点总结:只有把innodb设置成独立的表空间后,才能创建innodb表引擎的表分区 相关命令: /s; 查看详细信息版本啊编码啊 什么的。。。 show engines; 查看默认表引擎 show plugins; 查看当前MySQL的所有插件,可以查看是否支持分区partition show index from from tabName; 查看索引 show procedure status; 查看简历的存储
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。