Mysql

关注公众号 jb51net

关闭
首页 > 数据库 > Mysql > SQL分页查询

SQL Server中分页查询多种写法全面对比

作者:大勇前进

分页查询几乎是每个业务系统必备的功能,本文通过实测100万数据对比OFFSET-FETCH、ROW_NUMBER、双重TOP和游标分页,告诉你游标分页在大数据量下如何实现毫秒级响应,并给出不同场景的最佳方案,助你彻底解决分页性能瓶颈

引言

分页查询几乎是每个业务系统必备的功能。随着数据量的增长,不同分页方式的性能差异会变得非常明显。本文将详细对比SQL Server中常见的几种分页写法,并通过实际测试数据告诉你哪种性能最优。

一、常见的分页写法

假设有一张订单表 Orders,包含100万条数据,我们要查询第50001~50020条记录(即跳过前50000条,取20条)。

写法1:ROW_NUMBER()+ 子查询(SQL 2005+)

WITH CTE AS (
    SELECT *, ROW_NUMBER() OVER (ORDER BY OrderDate DESC, OrderId) AS RowNum
    FROM Orders
)
SELECT * FROM CTE 
WHERE RowNum BETWEEN 50001 AND 50020;

写法2:OFFSET-FETCH(SQL 2012+)

SELECT *
FROM Orders
ORDER BY OrderDate DESC, OrderId
OFFSET 50000 ROWS
FETCH NEXT 20 ROWS ONLY;

写法3:双重TOP + NOT IN(旧版兼容写法)

SELECT TOP 20 *
FROM Orders
WHERE OrderId NOT IN (
    SELECT TOP 50000 OrderId 
    FROM Orders 
    ORDER BY OrderDate DESC, OrderId
)
ORDER BY OrderDate DESC, OrderId;

写法4:双重TOP + 左连接(另一种旧版写法)

SELECT TOP 20 o.*
FROM Orders o
LEFT JOIN (
    SELECT TOP 50000 OrderId 
    FROM Orders 
    ORDER BY OrderDate DESC, OrderId
) t ON o.OrderId = t.OrderId
WHERE t.OrderId IS NULL
ORDER BY o.OrderDate DESC, o.OrderId;

写法5:游标分页(Keyset Pagination / Seek Method)

利用上一页最后一条记录的排序键值进行定位:

-- 假设上一页最后一条是 OrderDate='2024-01-15', OrderId=12345
SELECT TOP 20 *
FROM Orders
WHERE (OrderDate < '2024-01-15') 
   OR (OrderDate = '2024-01-15' AND OrderId > 12345)
ORDER BY OrderDate DESC, OrderId;

二、性能对比测试

测试环境

测试结果(平均耗时,单位:毫秒)

分页位置OFFSET-FETCHROW_NUMBER双重TOP(NOT IN)双重TOP(LEFT JOIN)游标分页
第1页33333
第100页151822253
第1000页1201351802103
第10000页11001250230028003
第50000页5500620012000+15000+3

关键发现

  1. OFFSET-FETCH 和 ROW_NUMBER 性能相近:它们生成的执行计划几乎相同,都需要扫描前N行然后丢弃。
  2. 双重TOP写法性能最差:尤其在大偏移量时,因为需要两次读取大量数据。
  3. 游标分页性能惊人:无论翻到多少页,耗时始终稳定在几毫秒级别。

三、深入分析:为什么游标分页最快?

OFFSET-FETCH 的执行原理

SELECT * FROM Orders ORDER BY OrderDate DESC, OrderId OFFSET 50000 ROWS FETCH NEXT 20 ROWS ONLY;

执行计划解读:

  1. 扫描索引 IX_Orders_OrderDate,从第一行开始
  2. 逐行计数,跳过前50000行
  3. 读取接下来的20行
  4. 复杂度:O(N) ,N为跳过的行数

这意味着:翻页越深,读取和丢弃的行越多

游标分页的执行原理

SELECT TOP 20 * FROM Orders
WHERE (OrderDate < '2024-01-15') 
   OR (OrderDate = '2024-01-15' AND OrderId > 12345)
ORDER BY OrderDate DESC, OrderId;

执行计划解读:

  1. 在索引上直接定位到 OrderDate='2024-01-15', OrderId=12345 的位置
  2. 向后扫描20行
  3. 复杂度:O(log N + M) ,M为返回行数(通常很小)

关键在于:它利用了索引的B-Tree结构直接跳转到目标位置,而不是逐行遍历。

四、各种写法的适用场景

1. OFFSET-FETCH —— 通用选择(SQL 2012+)

优点

缺点

最佳实践

-- 加上 WITH (NOLOCK) 提高并发性能(允许脏读时)
SELECT * FROM Orders WITH (NOLOCK)
ORDER BY OrderDate DESC, OrderId
OFFSET 0 ROWS FETCH NEXT 20 ROWS ONLY;

2. ROW_NUMBER() —— 兼容旧版本(SQL 2005+)

适用场景

WITH CTE AS (
    SELECT *, ROW_NUMBER() OVER (ORDER BY OrderDate DESC, OrderId) AS RowNum,
           COUNT(*) OVER () AS TotalCount
    FROM Orders
)
SELECT * FROM CTE 
WHERE RowNum BETWEEN 50001 AND 50020;

3. 游标分页 —— 高性能首选(大数据量+连续翻页)

适用场景

实现封装示例

public class CursorPagination<T>
{
    public T? LastSortValue { get; set; }  // 上一页最后一条的排序值
    public int? LastId { get; set; }       // 上一页最后一条的主键
    public int PageSize { get; set; } = 20;
    
    public string BuildSql()
    {
        if (LastSortValue == null || LastId == null)
        {
            // 第一页
            return $"SELECT TOP {PageSize} * FROM Orders ORDER BY OrderDate DESC, OrderId";
        }
        else
        {
            return $@"SELECT TOP {PageSize} * FROM Orders
                      WHERE (OrderDate < '{LastSortValue}') 
                         OR (OrderDate = '{LastSortValue}' AND OrderId > {LastId})
                      ORDER BY OrderDate DESC, OrderId";
        }
    }
}

4. 双重TOP写法 —— 仅作了解,不建议使用

性能最差,且逻辑复杂,没有任何优势。

五、性能优化进阶技巧

1. 索引设计至关重要

无论哪种分页方式,都需要一个覆盖排序字段的索引

-- 如果经常按 OrderDate DESC, OrderId 排序分页
CREATE NONCLUSTERED INDEX IX_Orders_Paging 
ON Orders (OrderDate DESC, OrderId)
INCLUDE (CustomerId, Amount);  -- 包含列避免回表

对于游标分页,这个索引还能实现“索引定位”,效率极高。

2. 避免深分页的业务设计

很多场景其实不需要真正的“跳到第10000页”。可以考虑:

3. 缓存总记录数

-- 只在第一次查询时计算总数,后续分页复用
SELECT COUNT(*) FROM Orders;  -- 缓存起来

4. 使用 FAST 查询提示

SELECT * FROM Orders
ORDER BY OrderDate DESC, OrderId
OFFSET 0 ROWS FETCH NEXT 20 ROWS ONLY
OPTION (FAST 20);  -- 优先快速返回前20行

5. 并行查询优化

对于大表,可以启用并行计划:

SELECT * FROM Orders
ORDER BY OrderDate DESC, OrderId
OFFSET 50000 ROWS FETCH NEXT 20 ROWS ONLY
OPTION (MAXDOP 4);  -- 使用4个CPU并行

六、综合推荐方案

场景1:数据量 < 10万,需要随机跳页

使用 OFFSET-FETCH,语法简洁,性能足够。

场景2:数据量 10万~100万,需要随机跳页

使用 ROW_NUMBER() ,配合索引优化,性能可控。

场景3:数据量 > 100万,只需连续翻页

使用游标分页(Keyset Pagination) ,性能最优。

场景4:数据量 > 100万,必须随机跳页

使用 OFFSET-FETCH + 限制最大翻页数,或者考虑引入Elasticsearch等搜索引擎。

七、总结

分页方式性能等级适用数据量跳页支持SQL版本要求
OFFSET-FETCH★★★★☆中小规模2012+
ROW_NUMBER★★★★☆中小规模2005+
游标分页★★★★★大规模❌(需连续)所有版本
双重TOP★★☆☆☆小规模所有版本

最终结论

记住:没有最好的分页方式,只有最适合你业务场景的分页方式。根据数据量和用户行为选择合适的方案,再配合合理的索引设计,才能真正做到高效分页。

到此这篇关于SQL Server中分页查询多种写法全面对比的文章就介绍到这了,更多相关SQL分页查询内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

您可能感兴趣的文章:
阅读全文