SQL之美第一篇:组合索引巧解错误的BITMAP AND

2023-11-02 17:59

本文主要是介绍SQL之美第一篇:组合索引巧解错误的BITMAP AND,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

大家好,我是千寻,一名追求SQL优化极限的开发DBA,欢迎大家一起与我共赏SQL之美妙,如有疑问,欢迎留言,共同研究,下面进入正题:

问题描述:接到开发反馈,有一个SQL查询不出来结果,原因是字段【pysts_cd】是varchar2类型,去掉符号‘’ 就可以查出来结果,确认数据库没有问题数据以及各种异常数据(比如null,空值,特殊符号,都不存在)

原SQL:

select *

  from qx_prd_psch_d m

 where m.bqx_flag = 'spddqx'

   and m.is_sq_bqx = '0'

   and m.is_del = 0

   and m.pysts_cd ='2'

   and to_char(m.PAYSE_DT, 'yyyy-mm-dd') = '2019-04-17';

拿到SQL,直接执行确认开发说法无误,观察带上符号‘’于不带的两种执行计划:

可以看到,这里走了位图索引转换,同时两个索引做了合并,谓词条件里面的字段都走了索引,再看看出来结果的SQL执行计划:

对比发现了,RS_QX_PRD_PSCH_D_05这个索引一走就出现问题,单独走索引RS_QX_PRD_PSCH_D_04就没有问题,下面来做验证:

这里使用了to_single_byte函数做了全角转半角,当然,trim也可以,

果然,结果出来了。看到这里,部分同学会想那问题不就解决了,加个函数转换字段【pysts_cd】即可,肯定是还存在问题数据(PS:一般情况,这么解释就可以交任务了)当然没那么简单,哈哈。

开发反馈,这个SQL改动涉及代码很多,工作量太大,不给改,希望在数据库后台就解决了,因此,这里开始深入分析:

首先,确认问题字段类型:

图片

第二步,观察相关索引:

图片

这里稍微总结下:谓词条件一共使用了【   bqx_flag,is_sq_bqx,is_del,pysts_cd,PAYSE_DT】5个字段,那么问题出在哪里呢?有经验的人已经发现了 索引【RS_QX_PRD_PSCH_D_05】一定有问题!

第三步,测试索引问题所在

首先,问题所在pysts_cd字段肯定不能动,那么去掉该组合索引另一个字段试试呢?

结果出来了!同样的执行计划,同样的 Plan Hash Value,为什么会出现这种情况呢?细心的小伙伴已经发现啦,没错 你的想法是正确的!

就是谓词条件的filter里面字段的问题,多说一嘴,

Access:表示对应的谓词条件会影响数据的访问路径(是按照索引还是表)

Filter:表示谓词条件只会起到过滤作用,不会影响数据的访问路径。

难道是问题数据?很多人会被误导:

正好排序第一位是1,跟0不匹配,然后就被filter把后面的全都过滤了,让这部分索引结果是为空,导致两个索引走bitmap and以后结果集是空 ,这个解释也说得通,然而事实并非如此,让我们来修改再看看:

到这里,基本绝大部分人思路已经断了,嘿嘿,下面如何排查呢?

这里,就需要抓取真实执行计划了:

瞬间,问题清晰!【SYS_NC00043$】这个对象一般是oracle处理字符乱码才会出现的,查看IS_DEL类型

图片

,发现ORACLE小BUG,位图索引转换NUMBER(1)类型字段的时候,转换的值是乱码!这里又有BITMAP AND 导致连锁反应,结果集为0!

再次小心求证:

确认无误,问题字段其实并不是【pysts_cd】,反而是【is_del】!

问题明确了,解决方案很简单:

  1. 干掉索引 【RS_qx_prd_psch_d_04】+【RS_qx_prd_psch_d_05】

  2. 重建新的组合索引:

图片

既去掉了多个索引的冗余,又提高了SQL的效率,同时解决了开发人员的需求,有效降低他的工作量,收获了开发的崇拜之心,沉浸在SQL美妙的海洋,开心!

优秀的DBA,就该这样!

这篇关于SQL之美第一篇:组合索引巧解错误的BITMAP AND的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/332311

相关文章

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

深度解析Java @Serial 注解及常见错误案例

《深度解析Java@Serial注解及常见错误案例》Java14引入@Serial注解,用于编译时校验序列化成员,替代传统方式解决运行时错误,适用于Serializable类的方法/字段,需注意签... 目录Java @Serial 注解深度解析1. 注解本质2. 核心作用(1) 主要用途(2) 适用位置3

Debian 13升级后网络转发等功能异常怎么办? 并非错误而是管理机制变更

《Debian13升级后网络转发等功能异常怎么办?并非错误而是管理机制变更》很多朋友反馈,更新到Debian13后网络转发等功能异常,这并非BUG而是Debian13Trixie调整... 日前 Debian 13 Trixie 发布后已经有众多网友升级到新版本,只不过升级后发现某些功能存在异常,例如网络转

MySQL中On duplicate key update的实现示例

《MySQL中Onduplicatekeyupdate的实现示例》ONDUPLICATEKEYUPDATE是一种MySQL的语法,它在插入新数据时,如果遇到唯一键冲突,则会执行更新操作,而不是抛... 目录1/ ON DUPLICATE KEY UPDATE的简介2/ ON DUPLICATE KEY UP

MySQL分库分表的实践示例

《MySQL分库分表的实践示例》MySQL分库分表适用于数据量大或并发压力高的场景,核心技术包括水平/垂直分片和分库,需应对分布式事务、跨库查询等挑战,通过中间件和解决方案实现,最佳实践为合理策略、备... 目录一、分库分表的触发条件1.1 数据量阈值1.2 并发压力二、分库分表的核心技术模块2.1 水平分

Python与MySQL实现数据库实时同步的详细步骤

《Python与MySQL实现数据库实时同步的详细步骤》在日常开发中,数据同步是一项常见的需求,本篇文章将使用Python和MySQL来实现数据库实时同步,我们将围绕数据变更捕获、数据处理和数据写入这... 目录前言摘要概述:数据同步方案1. 基本思路2. mysql Binlog 简介实现步骤与代码示例1

使用shardingsphere实现mysql数据库分片方式

《使用shardingsphere实现mysql数据库分片方式》本文介绍如何使用ShardingSphere-JDBC在SpringBoot中实现MySQL水平分库,涵盖分片策略、路由算法及零侵入配置... 目录一、ShardingSphere 简介1.1 对比1.2 核心概念1.3 Sharding-Sp

MySQL 表空却 ibd 文件过大的问题及解决方法

《MySQL表空却ibd文件过大的问题及解决方法》本文给大家介绍MySQL表空却ibd文件过大的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录一、问题背景:表空却 “吃满” 磁盘的怪事二、问题复现:一步步编程还原异常场景1. 准备测试源表与数据

Mac电脑如何通过 IntelliJ IDEA 远程连接 MySQL

《Mac电脑如何通过IntelliJIDEA远程连接MySQL》本文详解Mac通过IntelliJIDEA远程连接MySQL的步骤,本文通过图文并茂的形式给大家介绍的非常详细,感兴趣的朋友跟... 目录MAC电脑通过 IntelliJ IDEA 远程连接 mysql 的详细教程一、前缀条件确认二、打开 ID

MySQL的配置文件详解及实例代码

《MySQL的配置文件详解及实例代码》MySQL的配置文件是服务器运行的重要组成部分,用于设置服务器操作的各种参数,下面:本文主要介绍MySQL配置文件的相关资料,文中通过代码介绍的非常详细,需要... 目录前言一、配置文件结构1.[mysqld]2.[client]3.[mysql]4.[mysqldum