【数据库-BUG】limit和order by一起使用出现的分页重复数据Bug

本篇介绍一个MySQL下SQL查询语句同时包含order by和limit出现的一个问题及原因，其中涉及的知识点包括 ：MySQL对limit的优化、MySQL的order排序、优先级队列和堆排序、堆排序的不稳定性；

MySQL分页时使用 limit+order by 会出现数据重复问题(踩坑)

之前写了一个分页查询用mybatisplus的分页查询，然后根据业务需求按照时间倒序排序。昨天前端说有重复数据，今天在解决问题的时候，发现了一个坑。 这是我之前没改的代码 错误重现： postman测试截图 第一页limit 100 第二页limit 100,100 会发现roomId 1241重复了两次。 原因： orderBy排序的目标字段不唯一，会出现数据排序不稳定，以至于limit分页时出现数据重复。 需要加上自增唯一的索引或者rowId，保证orderBy的排序的唯一性，可以解决limit分

在生产环境中，偶然发现clickhouse数据表中出现重复数据，并且都是重复的两条数据，重重迷雾，疑窦重生...

案发现场 业务需求：mysql从一张表中查询数据进行分页暂时，要求按照某字段进行排序。 做开发的同学都觉得这兼职就是小case啦，前端传入分页下标、分页大小、排序字段、排序方式。后端采用order by +limit就搞定了。 事实上我也是这么做的，但是最后却出了个出乎意料的bug，同样的请求参数，返回的数据顺序居然不一样，分页的时候，第一页的数据居然重复出现在第二页。并且bug不是必然复现，重复数据每次一样。 场景复现 准备一张表,并插入几条数据： CREATE TABLE `id_str1_str

Mysql 进行Order排序后limit导致数据重复和消失Bug1.背景2.原因3.处理方案 1.背景 数据库某个定时任务表中有31条数据，对该表进行num字段排序并分页，然后发现 SELECT * FROM A ORDER BY pack_act_num DESC limit 0, 40 SELECT * FROM A ORDER BY pack_act_num DESC limit 0, 10 ... SELECT * FROM A ORDER BY pack_act_num DESC limit

摘要：企业合同管理系统开发中遇到MySQL分页查询重复数据的典型问题。问题根源在于仅使用非唯一的create_time字段排序，导致MySQL隐式排序不稳定。解决方案是在ORDER BY子句中添加主键ID作为兜底排序字段，形成业务字段+主键ID的组合排序规则。这种优化既保证了分页结果的稳定性，又几乎不影响查询性能。文章还总结了MySQL分页排序的通用规范，强调必须避免单一非唯一字段排序，直接套用提供的排序模板，可彻底解决分页重复问题。

这个坑虽然不大，但非常具有迷惑性，尤其是在测试数据量小、排序值都唯一的情况下很难发现。任何时候，当你需要对可能存在重复值的列进行 ORDER BY 分页查询时，一定要在后面追加一个唯一键（如 id）作为第二排序条件，来保证排序的稳定性。这一个小小的改动，就能避免掉线上的“灵异事件”，省下你一下午挠头抓狂的调试时间。希望我的这次经历能帮到你！好了，今天就聊到这。大家在开发中还遇到过哪些看似“灵异”实则有理有据的坑呢？欢迎在评论区分享出来，我们一起成长！👍🎉。

当我们在使用order by的时候，有一个很经典的坑。不知道大家是否踩过。当我们使用orderby子句对结果进行排序时，如果有相同值的情况，MySQL会在排序时随机地对它们进行排列。这意味着，如果我们不注意在分页时正确地处理这些相同值，就会导致同一条数据出现在多个页面上.

在项目中：pgsql自定义函数，遇到 for循环中 limit 出来的数据时重复的问题，经过排查发现是**排序不彻底**导致的。

今天测试给我提了一个bug，说第二页的数据和第一页的数据有重复，于是我开始检查是不是sql写的有问题，检查后发现sql是ok的，如果不加分页数据不会重复，加了分页之后就发生重复了 原因：排序的字段是采用了更新时间排序，但是业务数据是批量插入的，所以业务数据的更新时间完全一样，导致排序失效，进而引发了重复数据的bug 解决方法： 方法1： 先用更新时间排序，再按id排序，就可以解决重复的问题 方法2：加一个排序字段，然后按照这个排序字段排序 ...

MySQL中ORDER BY与LIMIT一起使用（有坑） mysql进行ORDER BY和LIMIT的时候 内部会进行优化，ORDER BY的列有相同的值时，LIMIT 10和LIMIT 10,10 可能会查出重复的数据 如果要避免的话可以额外增加一个排序字段（比如：id）

Cat2Bug-Platform：轻量开源的 Bug 管理平台，让测试协作更简单

bug 定位方法

Cat2Bug-Platform 轻量开源 BUG 管理平台：从快速上手到测试协作的全流程提效

最近codex崩溃，根因以及解决办法

本文深度剖析了Chromium浏览器两个内核版本（M132经典版与M148+现代版）在下载按钮架构上的核心差异。经典版采用"按钮即显示器"的单层直连模型，而现代版引入中介控制器实现多层解耦，导致定制化开发中出现了"双环进度叠加"的渲染问题。文章揭示了该问题的根源：中介控制器默认注入的DownloadProgressRing子控件与按钮自绘逻辑产生渲染冲突。最后提出两种解决方案：完全绕过中介层或兼容性拦截子控件注入，推荐后者以保持架构兼容性。通过技术对比和问题溯源，为浏

Cat2Bug-Platform：用更轻量的开源 BUG 管理，搭起从发现问题到闭环交付的质量链路

摘要 Python的functools.lru_cache是一个强大的缓存工具，能显著提升函数性能，但也存在诸多限制和陷阱。本文深入探讨了其工作原理、适用场景及潜在问题： 核心机制：lru_cache通过存储最近调用的函数结果，避免重复计算，特别适合输入稳定、计算成本高的场景。 主要限制： 参数必须可哈希（需转换可变对象为不可变形式） 返回的是引用而非副本，可能导致缓存污染 典型陷阱： 缓存外部依赖数据（如数据库/文件）可能返回过期结果 并发场景下可能重复计算 异步函数缓存可能出错 解决方案：