数据结构与算法-day3-排序(上)-选择 冒泡 插入_weixin_34267123的博客-程序员秘密

技术标签: 数据结构与算法  

我的理解

排序有很多,上述图片给出的仅仅是三种常见的排序,那么如何去比较排序算法的优劣,怎么去选择呢?

有序度

平均时间复杂度就是加权平均期望时间复杂度,分析的时候要结合概率论的知识。 对于包含 n 个数据的数组,这 n 个数据就有 n! 种排列方式。不同的排列方式,排序执行的时间肯定是不同的如果用概率论方法定量分析平均时间复杂度,涉及的数学推理和计算就会很复杂。我这里还有一种思路,通过“有序度”和“逆序度”这两个概念来进行分析。

有序度是数组中具有有序关系的元素对的个数。

有序元素对用数学表达式表示就是这样:

有序元素对:a[i] <= a[j], 如果 i < j。 
复制代码

同理,对于一个倒序排列的数组,比如 6,5,4,3,2,1,有序度是 0;对于一个完全有序的数组,比如 1,2,3,4,5,6,有序度就是 n*(n-1)/2,也就是 15。我们把这种完全有序的数组的有序度叫作 满有序度

逆序度的定义正好跟有序度相反(默认从小到大为有序)

逆序元素对:a[i] > a[j], 如果 i < j。 
复制代码

关于这三个概念,我们还可以得到一个公式:逆序度 = 满有序度 - 有序度。我们排序的过程就是一种增加有序度减少逆序度的过程,最后达到满有序度,就说明排序完成了。

如何比较排序算法优劣

一. 排序算法的执行效率

  1. 最好情况、最坏情况、平均情况时间复杂度 !!!!!第一重要

我们在分析排序算法的时间复杂度时,要分别给出最好情况、最坏情况、平均情况下的时间复杂度。除此之外,你还要说出最好、最坏时间复杂度对应的要排序的原始数据是什么样的。 为什么要区分这三种时间复杂度呢?第一,有些排序算法会区分,为了好对比,所以我们最好都做一下区分。第二,对于要排序的数据,有的接近有序,有的完全无序。有序度不同的数据,对于排序的执行时间肯定是有影响的,我们要知道排序算法在不同数据下的性能表现。

  1. 时间复杂度的系数、常数 、低阶

我们知道,时间复杂度反应的是数据规模 n 很大的时候的一个增长趋势,所以它表示的时候会忽略系数、常数、低阶。但是实际的软件开发中,我们排序的可能是 10 个、100 个、1000 个这样规模很小的数据,所以,在对同一阶时间复杂度的排序算法性能对比的时候,我们就要把系数、常数、低阶也考虑进来。

  1. 比较次数和交换(或移动)次数

这一节和下一节讲的都是基于比较的排序算法。基于比较的排序算法的执行过程,会涉及两种操作,一种是元素比较大小,另一种是元素交换或移动。所以,如果我们在分析排序算法的执行效率的时候,应该把比较次数和交换(或移动)次数也考虑进去。

二.排序算法的内存消耗

我们前面讲过,算法的内存消耗可以通过空间复杂度来衡量,排序算法也不例外。不过,针对排序算法的空间复杂度,我们还引入了一个新的概念,原地排序。原地排序算法,就是特指空间复杂度是 O(1) 的排序算法

三.排序算法的稳定性

针对排序算法,我们还有一个重要的度量指标,稳定性。这个概念是说,如果待排序的序列中存在值相等的元素,经过排序之后,相等元素之间原有的先后顺序不变

我通过一个例子来解释一下。比如我们有一组数据 2,9,3,4,8,3,按照大小排序之后就是 2,3,3,4,8,9。

这组数据里有两个 3。经过某种排序算法排序之后,

  • 如果两个 3 的前后顺序没有改变,那我们就把这种排序算法叫作稳定的排序算法
  • 如果前后顺序发生变化,那对应的排序算法就叫作不稳定的排序算法

排序算法稳定性有啥用??

比如说,我们现在要给电商交易系统中的“订单”排序。订单有两个属性,一个是下单时间,另一个是订单金额。如果我们现在有 10 万条订单数据,我们希望按照金额从小到大对订单数据排序。对于金额相同的订单,我们希望按照下单时间从早到晚有序。对于这样一个排序需求,我们怎么来做呢?

解决思路是这样的:我们先按照下单时间给订单排序,注意是按照下单时间,不是金额。排序完成之后,我们用稳定排序算法,按照订单金额重新排序。两遍排序之后,我们得到的订单数据就是按照金额从小到大排序,金额相同的订单按照下单时间从早到晚排序的。

稳定排序算法可以保持金额相同的两个对象,在排序之后的前后顺序不变。第一次排序之后,所有的订单按照下单时间从早到晚有序了。 在第二次排序中,我们用的是稳定的排序算法,所以经过第二次排序之后,相同金额的订单仍然保持下单时间从早到晚有序。

冒泡排序(Bubble Sort)

  • 冒泡排序只会操作相邻的两个数据
  • 每次冒泡操作都会对相邻的两个元素进行比较,看是否满足大小关系要求。如果不满足就让它俩互换
  • 一次冒泡会让至少一个元素移动到它应该在的位置,重复 n 次,就完成了 n 个数据的排序工作。

我用一个例子,带你看下冒泡排序的整个过程。我们要对一组数据 4,5,6,3,2,1,从小到到大进行排序。第一次冒泡操作的详细过程就是这样:

可以看出,经过 一次冒泡操作之后,6 这个元素已经存储在正确的位置上。要想完成所有数据的排序,我们只要进行 6 次这样的冒泡操作就行了。

实际上,刚讲的冒泡过程还可以优化。当某次冒泡操作已经没有数据交换时,说明已经达到完全有序,不用再继续执行后续的冒泡操作。

// 冒泡排序,a 表示数组,n 表示数组大小
public void bubbleSort(int[] a, int n) {
  if (n <= 1) return;
 
 for (int i = 0; i < n; ++i) {
    // 提前退出冒泡循环的标志位
    boolean flag = false;
    for (int j = 0; j < n - i - 1; ++j) {
      if (a[j] > a[j+1]) { // 交换
        int tmp = a[j];
        a[j] = a[j+1];
        a[j+1] = tmp;
        flag = true;  // 表示有数据交换      
      }
    }
    if (!flag) break;  // 没有数据交换,提前退出
  }
}

复制代码

第一,冒泡排序是原地排序算法吗?

冒泡的过程只涉及相邻数据的交换操作,只需要常量级的临时空间,所以它的空间复杂度为O(1),是一个原地排序算法。

第二,冒泡排序是稳定的排序算法吗?

在冒泡排序中,只有交换才可以改变两个元素的前后顺序。为了保证冒泡排序算法的稳定性,当有相邻的两个元素大小相等的时候,我们不做交换,相同大小的数据在排序前后不会改变顺序,所以冒泡排序是稳定的排序算法。

第三,冒泡排序的时间复杂度是多少?

最好情况下,要排序的数据已经是有序的了,我们只需要进行一次冒泡操作,就可以结束了,所以

  • 最好情况时间复杂度是 O(n)。
  • 而最坏的情况是,要排序的数据刚好是倒序排列的,我们需要进行 n 次冒泡操作,所以最坏情况时间复杂度为 O(n2)。
  • 平均情况下的时间复杂度就是 O(n2)

如何算它的平均复杂度呢

要排序的数组的初始状态是 4,5,6,3,2,1 ,其中,有序元素对有 (4,5) (4,6)(5,6),所以有序度是 3

n=6,所以排序完成之后终态的满有序度为 n(n-1)/2=15。 。

冒泡排序包含两个操作原子,比较和交换 每交换一次,有序度就加 1。不管算法怎么改进,交换次数总是确定的,即 为逆序度,也就是 n*(n-1)/2–初始有序度。此例中就是 15–3=12,要进行 12 次交换操作。

对于包含 n 个数据的数组进行冒泡排序,平均交换次数是多少呢?最坏情况下,初始状态的有序度是 0,所以要进行 n*(n-1)/2 次交换。最好情况下,初始状态的有序度是 n*(n-1)/2,就不需要进行交换。我们可以取个中间值 n*(n-1)/4,来表示初始有序度既不是很高也不是很低的平均情况。

换句话说,平均情况下,需要 n*(n-1)/ 4 次交换操作,比较操作肯定要比交换操作多,而复杂度的上限是 O(n2),所以平均情况下的时间复杂度就是 O(n2)。

插入排序(Insertion Sort)

我们先来看一个问题。一个有序的数组,我们往里面添加一个新的数据后,如何继续保持数据有序呢?很简单,我们只要遍历数组,找到数据应该插入的位置将其插入即可。

这是一个动态排序的过程,即动态地往有序集合中添加数据,我们可以通过这种方法 保持集合中的数据一直有序。而对于一组静态数据,我们也可以借鉴上面讲的插入方法,来进行排序,于是就有了插入排序算法。

那插入排序具体是如何借助上面的思想来实现排序的呢?

首先,我们将数组中的数据分为两个区间,已排序区间和未排序区间。初始已排序区间只有一个元素,就是数组的第一个元素。插入算法的核心思想是取未排序区间中的元素,在已排序区间中找到合适的插入位置将其插入,并保证已排序区间数据一直有序。重复这个过程,直到未排序区间中元素为空,算法结束。

如图所示,要排序的数据是 4,5,6,1,3,2,其中左侧为已排序区间,右侧是未排序区间。

插入排序也包含两种操作,

  • 一种是元素的比较 : 当我们需要将一个数据 a 插入到已排序区间时,需要拿 a 与已排序区间的元素依次比较大小,找到合适的插入位置。
  • 一种是元素的移动 : 找到插入点之后,我们还需要将插入点之后的元素顺序往后移动一位,这样才能腾出位置给元素 a 插入。

对于不同的查找插入点方法(从头到尾、从尾到头),元素的比较次数是有区别的。但对于一个给定的初始序列,移动操作的次数总是固定的,就等于逆序度

满有序度是 n*(n-1)/2=15,初始序列的有序度是 5,所以逆序度是 10。插入排序中,数据移动的个数总和也等于 10=3+3+4。

// 插入排序,a 表示数组,n 表示数组大小
public void insertionSort(int[] a, int n) {
  if (n <= 1) return;

  for (int i = 1; i < n; ++i) {
    int value = a[i];
    int j = i - 1;
    // 查找插入的位置
    for (; j >= 0; --j) {
      if (a[j] > value) {
        a[j+1] = a[j];  // 数据移动
      } else {
        break;
      }
    }
    a[j+1] = value; // 插入数据
  }
}

复制代码

第一,插入排序是原地排序算法吗?

从实现过程可以很明显地看出,插入排序算法的运行并不需要额外的存储空间,所以空间复杂度是 O(1),也就是说,这是一个原地排序算法

第二,插入排序是稳定的排序算法吗?

在插入排序中,对于值相同的元素,我们可以选择将后面出现的元素,插入到前面出现元素的后面,这样就可以保持原有的前后顺序不变,所以插入排序是稳定的排序算法。

第三,插入排序的时间复杂度是多少?

  • 最好时间复杂度O(n)

如果要排序的数据已经是有序的,我们并不需要搬移任何数据。如果我们从尾到头在有序数据组里面查找插入位置,每次只需要比较一个数据就能确定插入的位置。所以这种情况下,最好是时间复杂度为O(n)。注意,这里是从尾到头遍历已经有序的数据。

  • 最坏时间复杂度O(n2)

如果数组是倒序的,每次插入都相当于在数组的第一个位置插入新的数据,所以需要移动大量的数据,所以最坏情况时间复杂度为 O(n2)

  • 平均时间复杂度O(n2)

还记得我们在数组中插入一个数据的平均时间复杂度是多少吗?没错,是 O(n)。所以,对于插入排序来说,每次插入操作都相当于在数组中插入一个数据,循环执行 n 次插入操作,所以平均时间复杂度为 O(n2)。

选择排序(Selection Sort)

选择排序算法的实现思路有点类似插入排序,也分已排序区间和未排序区间。但是选择排序每次会从未排序区间中找到最小的元素,将其放到已排序区间的末尾

第一,选择排序是原地排序算法吗?

选择排序空间复杂度为 O(1),是一种原地排序算法。

第二,选择排序是稳定的排序算法吗?

选择排序是不稳定的排序算法

择排序每次都要找剩余未排序元素中的最小值,并和前面的元素交换位置,这样破坏了稳定性。 比如 5,8,5,2,9 这样一组数据,使用选择排序算法来排序的话,第一次找到最小元素 2,与第一个 5 交换位置,那第一个 5 和中间的 5 顺序就变了,所以就不稳定了。

第三,选择排序的时间复杂度是多少?

选择排序的最好情况时间复杂度、最坏情况和平均情况时间复杂度都为 O(n2)

为什么插入排序比冒泡排序更受欢迎呢?

我们前面分析冒泡排序和插入排序的时候讲到,

  • 冒泡排序不管怎么优化,元素交换的次数是一个固定值,是原始数据的逆序度
  • 插入排序是同样的,不管怎么优化,元素移动的次数也等于原始数据的逆序度

但是,从代码实现上来看,冒泡排序的数据交换要比插入排序的数据移动要复杂,冒泡排序需要 3 个赋值操作,而插入排序只需要 1 个

冒泡排序中数据的交换操作:
if (a[j] > a[j+1]) { // 交换
   int tmp = a[j];
   a[j] = a[j+1];
   a[j+1] = tmp;
   flag = true;
}

插入排序中数据的移动操作:
if (a[j] > value) {
  a[j+1] = a[j];  // 数据移动
} else {
  break;
}
复制代码

我们把执行一个赋值语句的时间粗略地计为单位时间(unit_time),然后分别用冒泡排序和插入排序对同一个逆序度是 K 的数组进行排序。用冒泡排序,需要 K 次交换操作,每次需要 3 个赋值语句,所以交换操作总耗时就是 3*K 单位时间。而插入排序中数据移动操作只需要 K 个单位时间。

这三种时间复杂度为 O(n2) 的排序算法中,冒泡排序、选择排序,可能就纯粹停留在理论的层面了,学习的目的也只是为了开拓思维,实际开发中应用并不多,但是插入排序还是挺有用的

在大规模数据排序的时候,这个时间复杂度还是稍微有点高,所以我们更倾向于用下一节要讲的时间复杂度为 O(nlogn) 的排序算法。

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_34267123/article/details/91405609

智能推荐

枚举!很暴力_mq田 a+b=c全排列 口口口+口口口=口口口.将数字1一9分别填入9个口中,每个数字__prime的博客-程序员秘密

第1节 坑爹的奥数问题描述小哼遇到了一道奥数题:???+???=???,将数字1~9分别填入9个?中使得等式成立的组合共几种?注:一个式子中每个数字只能使用一次。并且规定左右如173+286=459 和 286+173=459的形式是同一个组合。package com.qianwei.chapter3;public class MathematicalOlympiadTe...

linux环境下创建raid,linux下创建RAID设备_Winni要专注的博客-程序员秘密

2010/2/7今天我们主要来学习下数据的冗余备份,在早期的linux中有tar,dump/restore,reync等软件来备份文件,后期出现了RAID0 RAID1 RAID4 RAID5 RAID5 RAID6 RAID10以及磁盘阵列,LVM逻辑卷, snapshoots快照 等先进的技术,逐渐代替了早期的方法,这里我们只简单的提一下tar dump/restore reync 早期lin...

stm32linux usb通讯,基于stm32的mcu和pc的usb通讯技术_拾叁SHETHAN的博客-程序员秘密

就通信方式讨论:(以下不论ARM核\嵌入式\低端\高端均称为单片机)单片机间通信可用UART或SPI串口通信,UART适合速率不高,为了兼容低端单片机的场合。SPI比较通用,而且速率可高至单片机核心时钟的1/4(但单片机IO速率低的要注意不能超过单片机IO速率)。高端单片机,如STM32F103系列,带有DMA,可减轻CPU负担。单片机与PC通信,一般用串口或USB接口。串口或用MAX232芯片与...

C语言自增自减运算符的区别与理解_自加循环函数_李双柠的博客-程序员秘密

C语言自增运算符的置于变量前和变量后的区别与理解自加自减运算符的概念:在普通语句定义并用printf函数输出结果for循环中作为判断条件结语自加自减运算符的概念:自增自减运算符存在于C/C++/C#/Java/Python等高级语言中,它的作用是在运算结束前(前置自增自减运算符)或后(后置自增自减运算符)将变量的值加(或减)一。主要的使用方式就两种,用在操作数前和操作数后,下面通过实例来具体探...

AndFix简单使用_andfix使用_韩zj的博客-程序员秘密

简介AndFix是阿里开源的一个Android热补丁框架,App可以在不重新发布版本的情况下,通过补丁替换出现bug的方法,达到修复bug的目的。现在支持android2.3到7.0,支持ARM 和X86 (AndFix supports Android version from 2.3 to 7.0, both ARM and X86 architecture, both Dalvik and...

关于调用WritePrivateProfileString函数的一点失败经历_writeprivateprofilestring 崩溃_温柔_的博客-程序员秘密

WritePrivateProfileString(lpApplicationName, lpKeyName, lpString, lpFileName)说明在初始化文件指定小节内设置一个字串返回值Long,非零表示成功,零表示失败。会设置GetLastError参数表参数

随便推点

类图、用例图、活动图、时序图(2小时速成班,仅供参考)_设计企业的类图_weixin_44163922的博客-程序员秘密

类图请按下属要求做出公司的类图:某公司部里有科室,职员从属于某一个科室;科室之间也有可能有上下级关系;现在一个科室的职工数为5~30人;科室的职工数量将来有可能增减。2. 用例图请按照下述内容画用例图用户可以用“租客”、“房东”和“管理员”等三种身份登录租房网。如果以房东登录,则可以发布自己的可以出租的房屋信息,维护房屋的状态;以租客身份登录,则可以查看和搜索房屋信息,预约看...

【C语言】-字符串逆序_折木`的博客-程序员秘密

题目:编写一个函数 reverse_string(char * string)(递归实现)实现:将参数字符串中的字符反向排列。要求:不能使用C函数库中的字符串操作函数。这里先提一点,很多人拿到这道题的时候就把题意理解错了,题目的要求是将字符串的字符反向排列,而不是把字符串的字符反向打印到屏幕上。假使我们使用数组存放的这组字符串,那么函数的功能应该就是是数组中的字符串按逆序排列。先来看递归写法:...

华为悦盒ec6108v9修改mac、sn、stbid修改实现移植到性能好的设备_华为机顶盒改mac_小王同学49号的博客-程序员秘密

1.WIFI正常连接无线路由器同时电脑正常连接到此无线路由器,打开悦盒的“允许远程维护连接”,记下“本机无线IP地址”和“本次连接验证码”,没有本次连接验证码的,密码为:.287aW(前面有个点)打开STBMonitor工具,输入正确的STB IP(此IP为悦盒的本机无线IP地址)、登录密码(此密码为本次连接验证码),点击右上侧的“连接”,此时左下侧当前状态提示“部分成功”,说明成功建立了悦盒与电脑之间的通信联系,连接成功后,点击右下侧的“提交”,此时左下侧当前状态提示“部分成功”,说明此时STB授权成

为什么说Python是普通人编程领域的王者_菜鸟学Python的博客-程序员秘密

点击上方“菜鸟学Python”,选择“星标”公众号超级无敌干货第一时间推给你!!!Python 自上个世纪诞生,一直过着不温不火的生活。直到近几年,乘着数据科学的东风,从低调的脚本小兵,...

Task01、Task02_啥也不会a的博客-程序员秘密

本文意在于记录短期学习中自己所搜寻整理的知识点,主要学习平台在伯禹https://www.boyuai.com/elites/course/cZu18YmweLv10OeVTask01:线性回归;Softmax与分类模型、多层感知机(1天)Task02:文本预处理;语言模型;循环神经网络基础(1天)Task01:线性回归;Softmax与分类模型、多层感知机线性回归Softmax与分类模...

R语言导入csv数据后,所有列变成一列怎么办?_r语言按行读取数据成为一列_someday or one day的博客-程序员秘密

R语言导入csv数据:DATARET = read.csv2("C:\\Users\\Administrator\\Desktop\\data1.csv",encoding = "uft-8")出现问题如下:解决方法:DATARET = read.csv2("C:\\Users\\Administrator\\Desktop\\data1.csv",encoding = "uft-8",sep = ",")

推荐文章

热门文章

相关标签