首页 > 代码库 > Oracle表连接

Oracle表连接

一个普通的语句select * from t1, t2 where t1.id = t2.id and t1.name = ‘a‘; 这个语句在什么情况下最高效?

表连接分类:

  1. 嵌套循环连接(Nested Loop Join)

  2. 排序合并连接(Merge Sort Join):PGA 中的 SORT_AREA_SIZE 控制

  3. 哈希连接(Hash Join):PGA中的HASH_AREA_SIZE控制

 

示例(基本均是在sql*plus环境下执行):

-- 准备脚本

prompt 准备实验环境.....

drop table t1 cascade constraints purge;

drop table t2 cascade constraints purge;

 

create table t1(

  id       number not null,

  n        number,

  contents varchar2(4000)

);

 

create table t2(

  id       number not null,

  t1_id    number not null,

  n        number,

  contents varchar2(4000)

);

 

execute dbms_random.seed(0);

 

insert into t1

(

       id,

       n,

       contents

)

select rownum,

       rownum,

       dbms_random.string(‘a‘, 50)

  from dual

connect by level <= 100

  order by dbms_random.random;

 

insert into t2

(

       id,

       t1_id,

       n,

       contents

)

select rownum,

       rownum,

       rownum,

       dbms_random.string(‘b‘, 50)

  from dual

connect by level <= 100000

  order by dbms_random.random;

 

commit; 

 

-- 修改统计参数为ALL

alter system set statistics_level=all;

-- alter session set statistics_level=all; 会话级修改,偶尔失效

show parameter statistics_level;

 

set linesize 1000

 

-- 实验开始

-- NL连接表

-- 1.1 HINT含义 leading(t1)表示强制先访问t1表,也就是t1表作为驱动表;use_nl表示强制用嵌套循环连接方式

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

starts列是表访问的次数,t1表访问了1次,t2表访问了100次

-- 1.2

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n in (19, 20);

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1表访问了1次,t2表访问了2次

 

-- 1.3

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1表访问了1次,t2表访问了1次

 

-- 1.4

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 9999999;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1表访问了1次,t2表访问了0次

 

NL表连接访问次数最终结论:t1表的查询返回多少条记录,t2表就访问多少次。也就是,在嵌套循环连接中,驱动表返回多少条记录,被驱动表就访问多少次。

 

--2.  哈希连接表

-- 2.1

select /*+leading(t1) use_hash(t2)*/ * from t1, t2 where t1.id = t2.t1_id;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1 1次, t2 1次

在HASH连接中,驱动表和被驱动表都只会访问1次或0次

 

-- 2.2

select /*+leading(t1) use_hash(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 9999999;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1 1次,t2 0次

 

-- 2.3

select /*+leading(t1) use_hash(t2)*/ * from t1, t2 where t1.id = t2.t1_id and 1 = 2;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1 0次, t2 0次

 

-- 3. 排序合并连接

select /*+ordered use_merge(t2)*/ * from t1, t2 where t1.id = t2.t1_id;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1 1次, t2 1次

 

假设两张表,A和B,如果A作为驱动表,B作为被驱动表,那么,嵌套循环连接,就是先扫描A表,对A表的每一条记录,都扫描一遍B表;

而排序合并连接是 A表跟B表内的记录同时排序,然后连接; 哈希连接,类似排序合并,建立哈希表来连接。所以当返回少量记录的时候(OLTP系统常用,OLTP多用于电信、金融等系统),嵌套循环连接更高效,而返回大量记录的时候,排序合并连接跟哈希连接更高效。

 

各类连接驱动顺序区别

1.嵌套循环连接

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select /*+leading(t2) use_nl(t1)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1表先访问:BUFFER 1014,t2只访问1次

t2表先访问:BUFFER 701K,t1被访问100000次

所以,嵌套循环连接要特别注意驱动表的顺序,小的结果集先访问,大的结果集后访问

2. 哈希连接

select /*+leading(t1) use_hash(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select /*+leading(t2) use_hash(t1)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

t1表先访问:BUFFER 1013,Used_Mem 286K,时间0.04秒

t2表先访问:BUFFER 1013,Used_Mem 11MB,时间0.01秒

在哈希连接中,驱动表顺序也很重要

 

3.排序合并连接

select /*+leading(t1) use_merge(t2)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select /*+leading(t2) use_merge(t1)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

无论先访问t1还是先访问t2,效率都一样,执行时间,BUFFER,USED_MEM都一样,这表明,排序合并连接没有驱动表概念。

 

综上所述:嵌套循环连接和哈希连接有驱动顺序,驱动表的顺序不同将影响表连接的性能;而排序合并连接没有驱动的概念,无论哪张表在前都无妨。

 

嵌套循环连接不需要排序;哈希连接并不排序,消耗内存是用于建议HASH表;排序合并连接需要排序。关于哈希连接和排序合并连接,不要取多余的字段参与排序,因为选择的字段越少,消耗内存的尺寸就越小。

select /*+leading(t2) use_merge(t1)*/ * from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select /*+leading(t2) use_merge(t1)*/ t1.id from t1, t2 where t1.id = t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

可以看出Used_Mem代表的内存消耗差别很大

 

各类连接限制场景

explain plan for

  select /*+leadind(t1) use_hash(t2)*/ *

     from t1, t2 

  where t1.id <> t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display);

没有按照HINT的提示走HASH连接,而是走了NL连接

同理,可以试验> 、 < 、like,HASH都不支持。

 

explain plan for

  select /*+leadind(t1) use_merge(t2)*/ *

     from t1, t2 

  where t1.id <> t2.t1_id and t1.n = 19;

select * from table(dbms_xplan.display);

排序合并连接不支持<>和Like,但是支持>、<

 

嵌套循环无限制

表连接与索引

select /*+leading(t1) use_nl(t2)*/ * from t1, t2 where t1.id = t2.t1_id;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

如果不使用HINT提示

select * from t1, t2 where t1.id = t2.t1_id;

select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

会显示走的是HASH连接,因为ORACLE认为HASH连接更合理,但是此时逻辑读,COST值都差不多

create index t1_n on t1(n);

再执行上述语句,看看扫描t1表时BUFFER的差别

create index t2_t1_id on t2(t1_id);

再执行上述语句,看看扫描t2表时BUFFER的差别

最适合NL连接的场景:

  1. 两表关联返回的记录不多,最佳情况是驱动结果集仅返回1条或少量几条记录,而被驱动表仅匹配到1条或少量几条记录,这种情况,即便t1和t2表的记录奇大无比,也是非常迅速的。

  2. 遇到一些不等值查询导致哈希和排序合并连接被限制使用,不得不使用NL连接。

  3.最佳的索引建立位置:驱动表的限制条件所在列有索引,被驱动表的连接条件所在列有索引。原因在于,驱动表的限制条件建立索引是为了缩小扫描驱动表的时 间,如果在驱动表的连接条件建立索引就没有任何意义了,所有列关联到另一个表的所有列,等同于每一条记录都要关联。而驱动表的限制条件建立了索引,只快速 返回1条或几条,然后再等传递给t2表的t1_id列,一般情况下,t2表对应t1表返回的记录并不多,所以t2表的t1_id列建索引是有意义的。

 

哈希连接与索引

连接条件的索引对哈希连接和排序合并连接起不到传递作用,对于哈希连接和排序合并连接来说,索引的连接条件建立索引起不到快速检索的作用,但是限制条件列如果有适合的索引可以快速检索到少量记录,还是可以提升性能的。

 

两表关联等值查询,ORACLE一般倾向于走HASH连接,因为HASH连接算法本身比较高效,也比较先进。优化HASH连接可以通过调整PGA中的HASH_AREA_SIZE来优化,如果PGA是自动管理的,那么就增大PGA的大小。

 

排序合并连接与索引

排序合并连接上的连接条件虽然没有检索作用,但是有消除排序的作用,因此可以提高效率。

SQL>select /*+ordered use_merge(t2)*/

                      *

              from t1, t2

           where t1.id = t2.t1_id;

SQL>select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

 

create index idx_t1 on t1(id);

create index idx_t1_id on t2(t1_id); -- 上面建立过

SQL>select /*+ordered use_merge(t2)*/

                      *

              from t1, t2

           where t1.id = t2.t1_id;

SQL>select * from table(dbms_xplan.display_cursor(null, null, ‘allstats last‘));

建了两个索引,最终只用到了一个,这是ORACLE排序合并连接的BUG,在11G官方文档里有承认。

也可以通过增大PGA,优化排序合并连接

 

Oracle表连接