关于Oracle数据库分页查询的小技巧
对于Oracle中的相关优化,有许多常用的方法,像大家都知道的如:select *不提倡使用,效率极差,建议显式获取列,即使是所有字段也应罗列。而取总数时使用count(*),为提高cache的命中率,尽量做到SQL重用。另外,提高性能的好选择可能就是把所有的字符数据都
对于Oracle中的相关优化,有许多常用的方法,像大家都知道的如:select *不提倡使用,效率极差,建议显式获取列,即使是所有字段也应罗列。而取总数时使用count(*),为提高cache的命中率,尽量做到SQL重用。另外,提高性能的好选择可能就是把所有的字符数据都保存为Unicode,Java以Unicode形式处理所有数据,因此,数据库驱动程序不必再执行转换过程。
而这篇文章我们主要来了解下关于用SQL来实现分页的很多种实现方式,有些语句可能并不是很通用,只能用在一些特殊场景之中,而一些虽然功能强大、使用方便,带来的缺陷就是效率会慢得掉渣,接下来是IT男经过亲身的开发经验,分别讲解下这些常用的sql查询语句的作用,但愿对你有帮助!
以下介绍三种比较通用的实现方案;在以下各种实现中,ROWNUM是一个最核心的关键词,在查询时他是一个虚拟的列,取值为从1到记录总数的序号。
1、首先来介绍我们工作中最常使用的一种实现方式:
SELECT * FROM (SELECT IT_NAN_.*, ROWNUM R_ FROM (SELECT * FROM IT_NAN T ORDER BY T.IT_CAT) IT_NAN_ WHERE ROWNUM = 49991;
其中最内层的查询SELECT为不进行翻页的原始查询语句,可以用自己的任意Select SQL替换;ROWNUM = 49991控制分页查询的每页的范围。分页的目的就是控制输出结果集大小,将结果尽快的返回;上面的SQL语句在大多数情况拥有较高的效率,主要体现在WHERE ROWNUM
2、上面例子中展示的在查询的第二层通过ROWNUM
SELECT * FROM (SELECT IT_NAN_.*, ROWNUM R_ FROM (SELECT * FROM IT_NAN T ORDER BY T.IT_CAT) IT_NAN_ ) WHERE R_ BETWEEN 49991 AND 50000;
由于Oracle可以将外层的查询条件推到内层查询中,以提高内层查询的执行效率,但不能跨越多层。
对于第一个查询语句,第二层的查询条件WHERE ROWNUM
而第二个查询语句,由于查询条件BETWEEN 49991 AND 50000 是存在于查询的第三层,而Oracle无法将第三层的查询条件推到最内层(即使推到最内层也没有意义,因为最内层查询不知道ROWNUM代表什么)。因此,对于第二个查询语句,Oracle最内层返回给中间层的是所有满足条件的数据,而中间层返回给最外层的也是所有数据。数据的过滤在最外层完成,显然这个效率要比第一个查询低得多。(这种查询语句经过本IT男测试和以上相同的数据时,测试的时间大约为第一种查询时间的两倍,并也随着50000这个数值的变大,时间略微增长。)
3、以上两种方案完全是通过ROWNUM来完成,下面一种则采用ROWID和ROWNUM相结合的方式,SQL语句如下:
SELECT * FROM (SELECT RID FROM (SELECT IT_NAN_1.RID, ROWNUM R_ FROM (SELECT T.ROWID RID FROM IT_NAN T ORDER BY T.IT_CAT) IT_NAN_ WHERE ROWNUM = 49991) IT_NAN_1_ , IT_NAN IT_NAN_2_ WHERE IT_NAN_1_.RID = IT_NAN IT_NAN_2_.ROWID ;
从语句上看,共有嵌套查询了四层Select,最内层为可替换的不分页原始SQL语句,但是他查询的字段只有ROWID,而没有任何待查询的实际表字段,具体查询实际字段值是在最外层实现的。
这种方式的原理大致为:首先通过ROWNUM查询到分页之后的10条实际返回记录的ROWID,最后通过ROWID将最终返回字段值查询出来并返回;
和前面两种实现方式相比,该SQL的实现方式更加繁琐,通用性也不是非常好,因为要将原始的查询语句分成两部分(查询字段在最外层,表及其查询条件在最内层);
但这种实现在特定场景下还是有优势的:比如我们经常要翻页到很后面,比如100000条记录中我们经常需要查90000-91000及其以后的数据;此时该方案效率可能要比前面的高;
因为前面的方案中是通过ROWNUM
从不断向后翻页这个角度来看,第一种实现方案的成本会越来越高,基本上是线性增长,而第三种方案的成本则不会像前者那样快速,他的增长只体现在通过查询条件读取ROWID的部分;(这种查询语句IT男同样进行了测试,测试的时间大约为第一种查询时间的一半,并也随着50000这个数值的变大,体现出的效果会更可观。而后我又测试了查看页数为1-10的查询速度,结果发现这个查询方法,仍旧比第一种要快将近一半…不知道具体原因,不过事实胜于雄辩啊…)
这个查询方法真的很给力,如果你们的项目中应用了hibernate的二级缓存对实体对象进行了缓存的话,那样的话,效率将会是更加的可观。
4、当然,除了以上提了这些方案,我们还可以用以下的SQL来实现:
SELECT * FROM IT_NAN WHERE ROWID NOT IN (SELECT ROWID FROM IT_NAN WHERE ROWNUM <p>以上两种查询语句IT男也测试了下,大概是8s左右。所以说如果项目数据量不大的话,可以尝试使用,如果百万或以上的数据,还是考虑上面的比较好些。</p> <p>………………<br> 注意:当ROWNUM作为查询条件时,他是在order by之前执行,所以要特别小心;<br> 比如我们想查询IT_NAN中按IT_CAT倒序排列的前10条记录不能用如下的SQL来完成:</p> <pre class="brush:php;toolbar:false">SELECT * FROM IT_NAN T WHERE ROWNUM <p>当然对于这个需求,可以参考上面的例子那样的子查询来实现,也可以采用Oracle的排序函数:ROW_NUMBER()函数根据OrderID这列来生成一个新的数据列。当然对ROW_NUMBER感兴趣的可以请教下度娘或谷哥,这里就不再细说,效果是差不多。</p> <p>关于数据的优化还有很多事情要做,要考虑,要研究,这也只是一点儿小技巧,有时间我会继续在博客中分享相关的经验,当然也希望有大虾们尽情指正、放荡的拍砖、一起探讨分享你的优化经验,共同成长!</p> <p class="copyright"> 原文地址:关于Oracle数据库分页查询的小技巧, 感谢原作者分享。 </p>

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

Oracle 所需内存量取决于数据库大小、活动水平和所需性能水平:用于存储数据缓冲区、索引缓冲区、执行 SQL 语句和管理数据字典缓存。具体数量受数据库大小、活动水平和所需性能水平影响。最佳实践包括设置适当的 SGA 大小、调整 SGA 组件大小、使用 AMM 和监控内存使用情况。

Oracle 数据库服务器硬件配置要求:处理器:多核,主频至少 2.5 GHz,大型数据库建议 32 核以上。内存:小型数据库至少 8GB,中等规模 16-64GB,大型数据库或高负载工作负载高达 512GB 或更多。存储:SSD 或 NVMe 磁盘,RAID 阵列提高冗余和性能。网络:高速网络(10GbE 或更高),专用网卡,低延迟网络。其他:稳定电源、冗余组件、兼容操作系统和软件、散热和冷却系统。

苹果公司最新发布的iOS18、iPadOS18以及macOSSequoia系统为Photos应用增添了一项重要功能,旨在帮助用户轻松恢复因各种原因丢失或损坏的照片和视频。这项新功能在Photos应用的"工具"部分引入了一个名为"已恢复"的相册,当用户设备中存在未纳入其照片库的图片或视频时,该相册将自动显示。"已恢复"相册的出现为因数据库损坏、相机应用未正确保存至照片库或第三方应用管理照片库时照片和视频丢失提供了解决方案。用户只需简单几步

如何在PHP中使用MySQLi建立数据库连接:包含MySQLi扩展(require_once)创建连接函数(functionconnect_to_db)调用连接函数($conn=connect_to_db())执行查询($result=$conn->query())关闭连接($conn->close())

PHP中处理数据库连接报错,可以使用以下步骤:使用mysqli_connect_errno()获取错误代码。使用mysqli_connect_error()获取错误消息。通过捕获并记录这些错误信息,可以轻松识别并解决数据库连接问题,确保应用程序的顺畅运行。

在Golang中使用数据库回调函数可以实现:在指定数据库操作完成后执行自定义代码。通过单独的函数添加自定义行为,无需编写额外代码。回调函数可用于插入、更新、删除和查询操作。必须使用sql.Exec、sql.QueryRow或sql.Query函数才能使用回调函数。

如何将GoWebSocket与数据库集成:设置数据库连接:使用database/sql包连接到数据库。将WebSocket消息存储到数据库:使用INSERT语句将消息插入数据库。从数据库检索WebSocket消息:使用SELECT语句检索数据库中的消息。

通过Go标准库database/sql包,可以连接到MySQL、PostgreSQL或SQLite等远程数据库:创建包含数据库连接信息的连接字符串。使用sql.Open()函数打开数据库连接。执行SQL查询和插入操作等数据库操作。使用defer关闭数据库连接以释放资源。
