Oracle 多行记录合并/连接/聚合字符串的几种方法
怎么合并多行记录的字符串,一直是oracle新手喜欢问的SQL问题之一,关于这个问题的帖子我看过不下30个了,现在就对这个问题,进行一个总结。
-
什么是合并多行字符串(连接字符串)呢,例如:
1 SQL> desc test; 2 Name Type Nullable Default Comments 3 ------- ------------ -------- ------- -------- 4 COUNTRY VARCHAR2(20) Y 5 CITY VARCHAR2(20) Y 6 7 SQL> select * from test; 8 9 10 COUNTRY CITY 11 -------------------- -------------------- 12 中国 台北 13 中国 香港 14 中国 上海 15 日本 东京 16 日本 大阪
要求得到如下结果集:
1 ------- -------------------- 2 中国 台北,香港,上海 3 日本 东京,大阪
实际就是对字符实现一个聚合功能,我很奇怪为什么Oracle没有提供官方的聚合函数来实现它呢:)
下面就对几种经常提及的解决方案进行分析(有一个评测标准最高★★★★★):
1.被集合字段范围小且固定型 灵活性★ 性能★★★★ 难度 ★
这种方法的原理在于你已经知道CITY字段的值有几种,且还不算太多,如果太多这个SQL就会相当的长。。看例子:
1 SQL> select t.country, 2 2 MAX(decode(t.city,'台北',t.city||',',NULL)) || 3 3 MAX(decode(t.city,'香港',t.city||',',NULL))|| 4 4 MAX(decode(t.city,'上海',t.city||',',NULL))|| 5 5 MAX(decode(t.city,'东京',t.city||',',NULL))|| 6 6 MAX(decode(t.city,'大阪',t.city||',',NULL)) 7 7 from test t GROUP BY t.country 8 8 / 9 10 11 COUNTRY MAX(DECODE(T.CITY,'台北',T.CIT 12 -------------------- ------------------------------ 13 中国 台北,香港,上海, 14 日本 东京,大阪,
大家一看,估计就明白了(如果不明白,好好补习MAX DECODE和分组)。这种方法无愧为最笨的方法,但是对某些应用来说,最有效的方法也许就是它。
2.固定表固定字段函数法 灵活性★★ 性能★★★★ 难度 ★★
此法必须预先知道是哪个表,也就是说一个表就得写一个函数,不过方法1的一个取值就要便捷多了。在大多数应用中,也不会存在大量这种合并字符串的需求。废话完毕,看下面:
定义一个函数
1 create or replace function str_list( str_in in varchar2 )--分类字段 2 return varchar2 3 is 4 str_list varchar2(4000) default null;--连接后字符串 5 str varchar2(20) default null;--连接符号 6 begin 7 for x in ( select TEST.CITY from TEST where TEST.COUNTRY = str_in ) loop 8 str_list := str_list || str || to_char(x.city); 9 str := ', '; 10 end loop; 11 return str_list; 12 end;
使用:
1 SQL> select DISTINCT(T.country),list_func1(t.country) from test t; 2 3 COUNTRY LIST_FUNC1(T.COUNTRY) 4 -------------------- ---------------- 5 中国 台北, 香港, 上海 6 日本 东京, 大阪 7 8 SQL> select t.country,str_list(t.country) from test t GROUP BY t.country; 9 10 11 COUNTRY STR_LIST(T.COUNTRY) 12 -------------------- ----------------------- 13 中国 台北, 香港, 上海 14 日本 东京, 大阪
这个时候,使用分组和求唯一都可以满足要求。它的原理就是,根据唯一的分组字段country,在函数里面再次查询该字段对应的所有被合并列,使用PL/SQL将其合并输出。
3.灵活表函数法 灵活性★★★ 性能★★★ 难度 ★★★
该方法是在方法2的基础上,使用动态SQL,将表名和字段名称传入,从而达到灵活的目的。
1 create or replace function str_list2( key_name in varchar2, 2 key in varchar2, 3 coname in varchar2, 4 tname in varchar2 ) 5 return varchar2 6 as 7 type rc is ref cursor; 8 str varchar2(4000); 9 sep varchar2(2); 10 val varchar2(4000); 11 cur rc; 12 begin 13 open cur for 'select '||coname||' 14 from '|| tname || ' 15 where ' || key_name || ' = :x ' 16 using key; 17 loop 18 fetch cur into val; 19 exit when cur%notfound; 20 str := str || sep || val; 21 sep := ', '; 22 end loop; 23 close cur; 24 return str; 25 end; 26 SQL> select test.country, 27 2 str_list2('COUNTRY', test.country, 'CITY', 'TEST') emplist 28 3 from test 29 4 group by test.country 30 5 / 31 32 33 COUNTRY EMPLIST 34 -------------------- ----------------- 35 中国 台北, 香港, 上海 36 日本 东京, 大阪
4.一条SQL法 灵活性★★★★ 性能★★ 难度 ★★★★
一条SQL的法则是某位大师提出的,大家曾经在某个时期都乐此不彼的寻求各种的问题一条SQL法,但是大师的意思似乎被曲解,很多性能差,可读性差,灵活差的SQL都是这个原则产物,所谓画虎不成反成犬类。不过,解决问题始终是第一原则,这里还是给出一个比较有代表性的一条SQL方法。
1 SELECT country,max(substr(city,2)) city 2 FROM 3 (SELECT country,sys_connect_by_path(city,',') city 4 FROM 5 (SELECT country,city,country||rn rchild,country||(rn-1) rfather 6 FROM 7 (SELECT test.country ,test.city,row_number() over (PARTITION BY test.country ORDER BY test.city) rn FROM test)) 8 CONNECT BY PRIOR rchild=rfather START WITH rfather LIKE '%0') 9 GROUP BY country; 10 下面分步解析,有4个FROM,就有4次结果集的操作。 11 step 1 给记录加上序号rn 12 SQL> SELECT test.country ,test.city,row_number() over (PARTITION BY test.country ORDER BY test.city) rn 13 2 FROM test 14 3 / 15 16 17 COUNTRY CITY RN 18 -------------------- -------------------- ---------- 19 日本 大阪 1 20 日本 东京 2 21 中国 上海 1 22 中国 台北 2 23 中国 香港 3
step 2 创造子节点父节点
1 SQL> SELECT country,city,country||rn rchild,country||(rn-1) rfather 2 2 FROM 3 3 (SELECT test.country ,test.city,row_number() over (PARTITION BY test.country ORDER BY test.city) rn 4 4 FROM test) 5 5 / 6 日本 大阪 日本1 日本0 7 日本 东京 日本2 日本1 8 中国 上海 中国1 中国0 9 中国 台北 中国2 中国1 10 中国 香港 中国3 中国2 11 step 3 利用sys_connect_by_path生成结果集 12 SELECT country,sys_connect_by_path(city,',') city 13 FROM 14 (SELECT country,city,country||rn rchild,country||(rn-1) rfather 15 FROM 16 (SELECT test.country ,test.city,row_number() over (PARTITION BY test.country ORDER BY test.city) rn FROM test)) CONNECT BY PRIOR rchild=rfather START WITH rfather LIKE '%0' 17 日本 ,大阪 18 日本 ,大阪,东京 19 中国 ,上海 20 中国 ,上海,台北 21 中国 ,上海,台北,香港 22 step 4 最终步骤,筛选结果集合 23 SQL> SELECT country,max(substr(city,2)) city 24 2 FROM 25 3 (SELECT country,sys_connect_by_path(city,',') city 26 4 FROM 27 5 (SELECT country,city,country||rn rchild,country||(rn-1) rfather 28 6 FROM 29 7 (SELECT test.country ,test.city,row_number() over (PARTITION BY test.country ORDER BY test.city) rn 30 8 FROM test)) 31 9 CONNECT BY PRIOR rchild=rfather START WITH rfather LIKE '%0') 32 10 GROUP BY country; 33 34 35 COUNTRY CITY 36 -------------------- ------- 37 中国 上海,台北,香港 38 日本 大阪,东京
可谓是,7歪8搞,最后还是弄出来了,呵呵。 PS:(逻辑上是对的..但是写的比较繁琐,可以简化!)
5.自定义聚合函数 灵活性★★★★★ 性能★★★★★ 难度 ★★★★★
最后一个方法是我认为“王道”的方法,自定义聚合函数。
就如何我在本开始说的,为啥oracle没有这种聚合函数呢?我也不知道,但oracle提供了聚合函数的API可以让我方便的自己定义聚合函数。
详细可以看Oracle Data Catridge guide这个文档。连接如下:
http://www.oracle.com.cn/other/9ionlinedoc/appdev.920/a96595/toc.htm
下面给出一个简单的例子:
1 SQL> SELECT t.country,strcat(t.city) FROM test t GROUP BY t.country; 2 3 4 COUNTRY STRCAT(T.CITY) 5 -------------------- ------------------ 6 日本 东京,大阪 7 中国 台北,香港,上海 8 简单吧,和官方的函数一样的便捷高效。 9 函数: 10 CREATE OR REPLACE FUNCTION strcat(input varchar2 ) 11 RETURN varchar2 12 PARALLEL_ENABLE AGGREGATE USING strcat_type; 13 TYPE: 14 create or replace type strcat_type as object ( 15 cat_string varchar2(4000), 16 static function ODCIAggregateInitialize(cs_ctx In Out strcat_type) return number, 17 member function ODCIAggregateIterate(self In Out strcat_type,value in varchar2) return number, 18 member function ODCIAggregateMerge(self In Out strcat_type,ctx2 In Out strcat_type) return number,member function ODCIAggregateTerminate(self In Out strcat_type,returnValue Out 19 varchar2,flags in number) return number)
6.待发掘...
PS: 在 oracle 10g下,可以使用以下系统函数:
1 select id,WMSYS.WM_CONCAT(oid) oid 2 from table1 3 group by id
总结,合并字符串还有更多的方法希望大家能发掘,本文的目的主要是抛砖引玉,如果有新的发现我会继续更新方法。
需要注意的问题是,本文采用varchar2为例子,所以长度有限制,oracle的版本对方法的实现也影响。