MySQL - 当LIMIT 进行分页时，为什么出现了重复数据_当排序字段为null的时候,使用limit offset查询,分页会查询到相同的某条数据-程序员宅基地

技术标签： MySQL排序 limit分页 MySQL MySQL分页数据重复 orderBy排序

哦，这时写的一个破SQL，遗留了个问题，没有去注意，所以造成了，有重复数据。因为引用了 PageHelper 插件，期初还以为是插件有问题。后来想想，毕竟整个框架都是用的这个插件，就算有问题早应该会出现了。所以，第一时间想到了SQL，的确，去了排序就没有问题。

说在前面

数据库分页是后台经常要使用的技术手段，有时候进行数据库查询会根据业务需要对某一字段排序，那么当待排序字段值相同时，我们得到的查询结果会是什么呢？

问题描述

数据分页时需要根据数据记录创建时间create_time字段倒序，即使用order by create_time desc，但是我们会发现，前端进行请求时获取的数据并不正确，分页中出现了一定的重复数据。

问题原因

期初还很好奇，总数没问题，总查询也没问题，为什么数据会重复了，然后会把部分数据给覆盖了。后来，通过查看SQL发现，是根据时间进行排序的，然而这个时间恰恰好多数据都是同一时间插入，或者设置的同一时间。

先后执行总查询（也就是不分页），是没有重复。

再次执行分页查询，分两页查询就有了出路。（且，两次查询出来的数据和总查询数据不一样了）

后来发现，当SQL中ORDER BY待排序字段值相同时，系统对数据的排序可能变得随机，即一会儿这条数据在前面，一会儿这条数据在后面了，所以当翻页的时候我们很容易便看到了重复的数据。

当然数据重复，你是不知道哪个是真的？哪个是假的？的。意思就是，第一页你看到了123，第二页看到了，345。或许真正的排序是 123645。

举个例子

我们可以通过一组数据做个简单实验，以下为一组实验数据，member_id字段为数据主键，数据的create_time字段完全相同：

我们执行以下SQL，将数据以create_time字段倒序查询，查询结果如下：

select member_id,create_time from member order by create_time desc;

查询结果：

我们发现查询结果中，数据排序变成了一种无序状态，这也是导致我们分页查询时出现重复数据的问题原因。
我们执行以下SQL，将数据以create_time字段倒序后再根据主键排序查询，查询结果如下：

select member_id,create_time from member order by create_time desc,member_id;

我们发现数据恢复了有序的状态。这也为我们提供了避免数据分页时待排序字段值相同情况时结果无序的解决方案。

SQL中ORDER BY相同值结果乱序的具体原因

查阅了Goole和相关资料，大概总结了这种情况的原因。其实发生这种现象是“故意”设计的。

如果没有指定ORDER BY语句，则SQL Server（或任何RDBMS）不保证以特定顺序返回结果。有些人认为，如果没有指定order by子句，行总是以聚簇索引顺序或物理磁盘顺序返回。然而，这是不正确的，因为在查询处理期间可以改变行顺序的许多因素，例如并行的HASH连接是更改行顺序的操作符的一个很好的例子。

如果指定ORDER BY语句，SQL Server将对行进行排序，并按请求的顺序返回。但是，如果该顺序不是确定性的，即可能有重复的值，则在每个具有相同值的组中，由于与上述相同的原因，该顺序是“随机的”。

确保确定性顺序的唯一方法是在ORDER BY子句中包含保证的唯一列或列组（例如主键）。

总结

为了避免类似的问题，我们可以将主键(或者具有唯一性的字段)排序引入需要排序的业务字段后。

本文链接：https://blog.csdn.net/Soinice/article/details/84729296

原作者删帖不实内容删帖广告或垃圾文章投诉

智能推荐

yum安装及配置_安装yum-程序员宅基地

文章浏览阅读10w+次，点赞40次，收藏332次。yum是用来管理rpm的，就跟maven管理jar包相似。yum源（库）分为本地库、网络库。首先要配置yum源，可支持多个源。先查看一下挂载情况：df -h这里我们要更换光盘，并挂载：mount /dev/cdrom /mnt（如果不能成功挂载，点击一下连接即可）之后再次使用 df -h命令，就能查看到光盘的内容。下面我们cd到 /mnt下查看一下：首先关注一下Pa..._安装yum

关于STM32 CAN的过滤器/滤波器_stm32can mailbox filter-程序员宅基地

文章浏览阅读3.8k次，点赞5次，收藏12次。1.在设置CanTxMsg.StdId时注意需要将其右移一位，比如如下滤波器配置：CAN_FilterInitStructure.CAN_FilterNumber=0;CAN_FilterInitStructure.CAN_FilterMode=CAN_FilterMode_IdMask;CAN_FilterInitStructure.CAN_FilterScale=CAN_Filter..._stm32can mailbox filter

HDU 5119 Happy Matt Friends（动态规划）【状压基础类模板】_matt has n friends. they are playing a game togeth-程序员宅基地

文章浏览阅读373次。att has N friends. They are playing a game together. Each of Matt’s friends has a magic number. In the game, Matt selects some (could be zero) of his friends. If the xor (exclusive-or) sum of the selected friends’magic numbers is no less than M , Matt wi_matt has n friends. they are playing a game together.

vue3+vite+ts项目配置开发环境和生产环境打包命令配置_vite打包配置-程序员宅基地

文章浏览阅读8.4k次，点赞6次，收藏29次。开发环境和生产环境的配置和打包方式有所不同，下面是基于vue3+vite+ts项目的开发环境和生产环境配置及打包方式的详细说明。打包完成后会在项目根目录下生成dist目录，里面包含了打包后的静态文件和index.html文件，可以直接部署到服务器上。这里配置了三个命令，分别是开发环境启动命令、开发环境打包命令和生产环境打包命令。1.3 配置.env.development。2.2 配置.env.production。1.2 配置vite.config.ts。2.1 配置vite.config.ts。_vite打包配置

（最新最详细）安装ubuntu18.04-程序员宅基地

文章浏览阅读2w次，点赞4次，收藏91次。目录1. window10中下载ubuntu镜像2. 制作U盘启动盘3. Ubuntu 分配硬盘空间1. window10中下载ubuntu镜像下载地址2. 制作U盘启动盘安装制作工具：UltraISO（点我下载），下载完成后安装插入用来做启动盘的U盘（最好是usb3.0接口，16GB或以上），并清空里面的文件打开安装好的UltraISO，点击继续试用按钮工作界面进入工作界面后，点击菜单栏文件(F)，在弹出的选项卡里点击打开在弹出的文件选择对话框中找到下载好的 Ubuntu18.04._ubuntu18.04

Toad报“No valid Oracle Client found”错-程序员宅基地

文章浏览阅读203次。2019独角兽企业重金招聘Python工程师标准>>> ..._toad no valid oracle client