SQL开发知识:oracle实现一对多数据分页查询筛选

前言

今天项目测试运行的时候,遇到了一个奇怪的问题,这个问题说起来按sql语法的话是没有错误的

但是呢按照我们的业务来做区分就有些逻辑上的错误了,

下面请听我慢慢道来,在数据库中有两个数据,

先来看下第一次sql是如何写的

查询之后在外面做分页,很正常的逻辑,但是大家都发现了,这是一个多表查询,而且是一对多关系,这就有点问题了

先来看一个图

 

问题出现在哪呢?

1、需要对主表做分页数据查询,  如:

    limit 1,10 SELECT * FROM (SELECT A.* ,ROWNUM R FROM (select _ from car) A WHERE ROWNUM <= ${limitEnd} ) B WHERE R >= ${limitStart} ]

以上是对上表做数据统计,然后分页,

2、根据传入字段做筛选,如:车辆的座位数,排量,

出现的问题

因为业务数据庞大,一对多关系数据冗余,出现数据偏移

主要解决思路如下

嗯,下来个图示吧

 

1、对子表合并,做行转列, 2、在主表做分页筛选时就不会出现,因为一对多关系数据冗余,出现数据偏移

SELECT * FROM (SELECT A.* ,ROWNUM R FROM (

select
T_CAR.”ID” as car_ID , T_CAR.”CAR_NAME” as car_CAR_NAME , T_CAR.”VIN_NUMBER”
as car_VIN_NUMBER ,car_label.label_ids
FROM T_CAR
left join (select CAR_ID,wm_concat(LABLE_ID) as label_ids from T_Car_label group by CAR_ID) car_label on car_label.CAR_ID = T_CAR.ID
where FIND_IN_SET(‘4aa06d2b9e904fe8bfeba3505c5dad6a’,label_ids)=1
) A WHERE ROWNUM <=10 ) B WHERE R >=

FIND_IN_SET:由于写在sql里的筛选很繁琐,此方法是一个储存函数 这个实现不是很好

此函数在mysql下有定义,但是此处因为与业务相关,内部做了一些更改

具体修改是当传进了一个{1,2,3,4}格式的数据时也可以做出条件筛选

create or replace FUNCTION FIND_IN_SET(piv_str1 varchar2, piv_str2 varchar2, p_sep varchar2 := ‘,’)
RETURN NUMBER IS
l_idx_a number:=0; — 用于计算piv_str1中分隔符的位置
l_idx_b number:=0; — 用于计算piv_str2中分隔符的位置
str_a varchar2(4000); — 根据分隔符截取的子字符串
str_b varchar2(4000); — 根据分隔符截取的子字符串
piv_str_a varchar2(4000) := piv_str1; — 将piv_str1赋值给piv_str_a
piv_str_b varchar2(4000) := piv_str2; — 将piv_str2赋值给piv_str_b
res number:=0; — 返回结果
BEGIN
— 如果piv_str_a中没有分割符,直接循环判断piv_str_a和piv_str_b是否相等,相等 res=1
IF instr(piv_str_a, p_sep, 1) = 0 THEN
— 如果piv_str2中没有分割符,直接判断piv_str1和piv_str2是否相等,相等 res=1
IF instr(piv_str_b, p_sep, 1) = 0 THEN
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
ELSE
— 循环按分隔符截取piv_str_b
LOOP
l_idx_b := instr(piv_str_b,p_sep);
— 当piv_str中还有分隔符时
IF l_idx_b > 0 THEN
— 截取第一个分隔符前的字段str
str_a:= substr(piv_str_b,1,l_idx_b-1);
— 判断 str 和piv_str_a 是否相等,相等 res=1 并结束循环判断
IF str_a = piv_str_a THEN
res:= 1;
EXIT;
END IF;
piv_str_b := substr(piv_str_b,l_idx_b+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
ELSE
— 循环按分隔符截取piv_str_a
LOOP
l_idx_a := instr(piv_str_a,p_sep);
— 当piv_str_a中还有分隔符时
IF l_idx_a > 0 THEN
— 截取第一个分隔符前的字段str
str_a:= substr(piv_str_a,1,l_idx_a-1);
— 如果piv_str_b中没有分割符,直接判断piv_str1和piv_str是否相等,相等 res=1
IF instr(piv_str_b, p_sep, 1) = 0 THEN
— 判断 str_a 和piv_str_b 是否相等,相等 res=1 并结束循环判断
IF str_a = piv_str_b THEN
res:= 1;
EXIT;
END IF;
ELSE
— 循环按分隔符截取piv_str_b
LOOP
l_idx_b := instr(piv_str_b,p_sep);
— 当piv_str中还有分隔符时
IF l_idx_b > 0 THEN
— 截取第一个分隔符前的字段str
str_b:= substr(piv_str_b,1,l_idx_b-1);
— 判断 str 和piv_str1 是否相等,相等 res=1 并结束循环判断
IF str_b = str_a THEN
res:= 1;
EXIT;
END IF;
piv_str_b := substr(piv_str_b,l_idx_b+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
piv_str_a := substr(piv_str_a,l_idx_a+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
— 返回res
RETURN res;
END FIND_IN_SET;

然后完美解决

总结

前言

今天项目测试运行的时候,遇到了一个奇怪的问题,这个问题说起来按sql语法的话是没有错误的

但是呢按照我们的业务来做区分就有些逻辑上的错误了,

下面请听我慢慢道来,在数据库中有两个数据,

先来看下第一次sql是如何写的

查询之后在外面做分页,很正常的逻辑,但是大家都发现了,这是一个多表查询,而且是一对多关系,这就有点问题了

先来看一个图

 

问题出现在哪呢?

1、需要对主表做分页数据查询,  如:

    limit 1,10 SELECT * FROM (SELECT A.* ,ROWNUM R FROM (select _ from car) A WHERE ROWNUM <= ${limitEnd} ) B WHERE R >= ${limitStart} ]

以上是对上表做数据统计,然后分页,

2、根据传入字段做筛选,如:车辆的座位数,排量,

出现的问题

因为业务数据庞大,一对多关系数据冗余,出现数据偏移

主要解决思路如下

嗯,下来个图示吧

 

1、对子表合并,做行转列, 2、在主表做分页筛选时就不会出现,因为一对多关系数据冗余,出现数据偏移

SELECT * FROM (SELECT A.* ,ROWNUM R FROM (

select
T_CAR.”ID” as car_ID , T_CAR.”CAR_NAME” as car_CAR_NAME , T_CAR.”VIN_NUMBER”
as car_VIN_NUMBER ,car_label.label_ids
FROM T_CAR
left join (select CAR_ID,wm_concat(LABLE_ID) as label_ids from T_Car_label group by CAR_ID) car_label on car_label.CAR_ID = T_CAR.ID
where FIND_IN_SET(‘4aa06d2b9e904fe8bfeba3505c5dad6a’,label_ids)=1
) A WHERE ROWNUM <=10 ) B WHERE R >=

FIND_IN_SET:由于写在sql里的筛选很繁琐,此方法是一个储存函数 这个实现不是很好

此函数在mysql下有定义,但是此处因为与业务相关,内部做了一些更改

具体修改是当传进了一个{1,2,3,4}格式的数据时也可以做出条件筛选

create or replace FUNCTION FIND_IN_SET(piv_str1 varchar2, piv_str2 varchar2, p_sep varchar2 := ‘,’)
RETURN NUMBER IS
l_idx_a number:=0; — 用于计算piv_str1中分隔符的位置
l_idx_b number:=0; — 用于计算piv_str2中分隔符的位置
str_a varchar2(4000); — 根据分隔符截取的子字符串
str_b varchar2(4000); — 根据分隔符截取的子字符串
piv_str_a varchar2(4000) := piv_str1; — 将piv_str1赋值给piv_str_a
piv_str_b varchar2(4000) := piv_str2; — 将piv_str2赋值给piv_str_b
res number:=0; — 返回结果
BEGIN
— 如果piv_str_a中没有分割符,直接循环判断piv_str_a和piv_str_b是否相等,相等 res=1
IF instr(piv_str_a, p_sep, 1) = 0 THEN
— 如果piv_str2中没有分割符,直接判断piv_str1和piv_str2是否相等,相等 res=1
IF instr(piv_str_b, p_sep, 1) = 0 THEN
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
ELSE
— 循环按分隔符截取piv_str_b
LOOP
l_idx_b := instr(piv_str_b,p_sep);
— 当piv_str中还有分隔符时
IF l_idx_b > 0 THEN
— 截取第一个分隔符前的字段str
str_a:= substr(piv_str_b,1,l_idx_b-1);
— 判断 str 和piv_str_a 是否相等,相等 res=1 并结束循环判断
IF str_a = piv_str_a THEN
res:= 1;
EXIT;
END IF;
piv_str_b := substr(piv_str_b,l_idx_b+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
ELSE
— 循环按分隔符截取piv_str_a
LOOP
l_idx_a := instr(piv_str_a,p_sep);
— 当piv_str_a中还有分隔符时
IF l_idx_a > 0 THEN
— 截取第一个分隔符前的字段str
str_a:= substr(piv_str_a,1,l_idx_a-1);
— 如果piv_str_b中没有分割符,直接判断piv_str1和piv_str是否相等,相等 res=1
IF instr(piv_str_b, p_sep, 1) = 0 THEN
— 判断 str_a 和piv_str_b 是否相等,相等 res=1 并结束循环判断
IF str_a = piv_str_b THEN
res:= 1;
EXIT;
END IF;
ELSE
— 循环按分隔符截取piv_str_b
LOOP
l_idx_b := instr(piv_str_b,p_sep);
— 当piv_str中还有分隔符时
IF l_idx_b > 0 THEN
— 截取第一个分隔符前的字段str
str_b:= substr(piv_str_b,1,l_idx_b-1);
— 判断 str 和piv_str1 是否相等,相等 res=1 并结束循环判断
IF str_b = str_a THEN
res:= 1;
EXIT;
END IF;
piv_str_b := substr(piv_str_b,l_idx_b+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
piv_str_a := substr(piv_str_a,l_idx_a+length(p_sep));
ELSE
— 当截取后的piv_str 中不存在分割符时,判断piv_str和piv_str1是否相等,相等 res=1
IF piv_str_a = piv_str_b THEN
res:= 1;
END IF;
— 无论最后是否相等,都跳出循环
EXIT;
END IF;
END LOOP;
— 结束循环
END IF;
— 返回res
RETURN res;
END FIND_IN_SET;

然后完美解决

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对的支持。


数据运维技术 » SQL开发知识:oracle实现一对多数据分页查询筛选