冒泡排序
基本原理
每一轮从头开始两两比较,将较大的项放在较小项的右边,这样每轮下来保证该轮最大的数在最右边。
算法实现
|
|
算法示例
待排序
排序过程
冒泡排序算法还有个可以改进的地方,就是在算法中加入一个布尔变量标识该轮有没有进行数据的交换,若在某一次排序中未发现气泡位置的交换,则说明待排序的无序区中所有的项均已满足排序后的结果。
|
|
算法分析
- 时间复杂度:冒泡排序最好的情况是初始状态是正序的,一次扫描即可完成排序,所以最好的时间复杂度为O(N);最坏的情况是反序的,此时最坏的时间复杂度为O(N2)。平均情况,每轮N/2次循环,N轮时间复杂度为O(N2)。
- 稳定性:算法是稳定的,因为当a=b时,由于只有大于才做交换,故a和b的位置没有机会交换,所以算法稳定。
- 空间复杂度:空间复杂度为O(1),不需要额外空间。
选择排序
基本原理
选择排序改进了冒泡排序,将必要的交换次数从O(n2)减少到O(n),但是比较次数仍保持为O(n2)。冒泡排序每比较一次就可能交换一次,但是选择排序是将一轮比较完后,把最小的放到最前的位置(或者把最大的放到最后)。
算法实现
|
|
算法示例
待排序
排序过程
算法分析
- 时间复杂度:选择排序最好和最坏的情况一样运行了O(N2)时间,但是选择排序无疑更快,因为它进行的交换少得多,当N值较小时,特别是如果交换时间比比较时间大得多时,选择排序实际上是相当快的。平均复杂度也是O(N2)。
- 稳定性:算法是不稳定的,假设a=b,且a在b前面,而某轮循环中最小值在b后面,而次最小值需要跟a交换,这时候b就在a前面了,所以选择排序是不稳定的。
- 空间复杂度:空间复杂度为O(1),不需要额外的空间。
插入排序
基本原理
插入排序的实现步骤为:从第一个元素开始,该元素可以认为已经被排序 -> 取出下一个元素,在已经排序的元素序列中从后向前扫描 -> 如果该元素小于前一个元素,则将两者调换,再与前一个元素比较–> 重复第三步,直到找到已排序的元素小于或者等于新元素的位置 -> 将新元素插入到该位置中 -> 重复第二步
算法实现
|
|
算法示例
待排序
排序过程
算法分析
- 时间复杂度:插入排序最好的情况是序列已经是升序排列了,在这种情况下,需要进行N-1次比较即可,时间复杂度为O(N),最坏的情况是序列降序排列,这时候时间复杂度为O(N2)。因此插入排序不适合对于数据量比较大的排序应用。但是如果需要排序的数据量很小(如小于千),那么插入排序还是一个不错的选择。插入排序平均时间复杂度为O(N2),但是它要比冒泡排序快一倍,比选择排序还要快一点,经常被用在较复杂的排序算法的最后阶段,例如快速排序。
- 稳定性:算法是稳定的,假设a=b,且a在b的前面,其排序位置必然比b先确定,而后面再插入b时,必然在a的后面,所以是稳定的。
- 空间复杂度:空间复杂度为O(1),不需要额外的空间。
注:冒泡最大的,选择最小的,插入到已排好序的
希尔排序
基本原理
希尔排序是基于插入排序的,插入排序有个弊端,假设一个很小的数据项在很靠近右端的位置上,那么所有的中间数据项都必须向右移动一位,这个步骤对每一个数据项都执行了将近N次的复制,这也是插入排序效率为O(N2)的原因。
希尔排序的中心思想是将数据进行分组,然后对每一组数据进行插入排序,在每一组数据都有序后,再对所有的分组利用插入排序进行最后一次排序。这样可以显著减少数据交换的次数,以达到加快排序速度的目的。
算法实现
|
|
这种思想需要依赖一个增量序列,我们称为n-增量,n表示进行排序时数据项之间的间隔,习惯上用h表示。增量序列在希尔排序中是很重要的。一般好的增量序列都有2个共同的特征: 最后一个增量必须为1,保证最后一趟是一次普通的插入排序;应该尽量避免序列中的值(尤其是相邻的值)互为倍数的情况
算法示例
待排序
排序过程,这里选取的间隔为3和1
算法分析
- 时间复杂度:希尔排序时间复杂度平均为O(NlogN),最好与最坏情况要根据具体的增量序列来判断,对于不同的增量序列有不同的复杂度。希尔排序的性能优于直接插入排序,因为在希尔排序开始时增量较大,分组较多,每组的记录数目少,故各组内直接插入较快,后来随着增量逐渐缩小,分组数逐渐减少,而各组的记录数目逐渐增多,但是由于已经局部排过序了,所以已经接近有序状态,新的一趟排序过程也较快。因此,希尔排序在效率上较直接插入排序有较大的改进。
- 稳定性:希尔排序是不稳定的,因为不同的间隔对应的数据是独自比较的,如果a=b,但是不在同一个间隔上,显然会出现前后颠倒的情况,所以希尔排序是不稳定的。
- 空间复杂度: 空间复杂度为O(1),不需要额外的存储空间。
快速排序
基本原理
快速排序本质上通过一个数组划分为两个子数组,然后递归地调用自身为每一个子数组进行快速排序来实现的,即算法分为三步:
- 把数组或者子数组划分为左边(较小的关键字)的一组和右边(较大的关键字)的一组;
- 调用自身对左边的一组进行排序;
- 调用自身对右边的一组进行排序。
快速排序需要划分数组,这就用到了划分算法。划分算法是由两个指针开始工作,两个指针分别指向数组的两头,左边的指针leftPtr向右移动,右边的指针rightPtr向左移动。当leftPtr遇到比枢纽(待比较的数据项,比其小的在其左边,比其大的在其右边,下面均称之为“枢纽”)小的数据项时继续右移,当遇到比枢纽大的数据项时就停下来;类似的rightPtr想反。两边都停下后,leftPtr和rightPtr都指在数组的错误一方的位置的数据项,交换这两个数据项。交换后继续移动这两个指针。
算法实现
|
|
算法示例
待比较
排序过程
算法分析
- 时间复杂度:平均时间复杂度为O(NlogN),最坏的情况下退化成插入排序了,为O(N2)。
- 稳定性:不稳定的排序方法。
- 空间复杂度:空间复杂度平均为O(logN),空间复杂度主要是由于递归造成的。
归并排序
基本原理
归并排序的思想是把一个数组分成两半,排序每一半。然后用merge方法将数组的两半归并成一个有序的数组。被分的每一半使用递归,再次划分排序,直到得到的子数组只含有一个数据项为止。
算法实现
|
|
算法示例
待排序
排序过程,先分为两堆,13,6,29一个数组,3,15一个数组;13,6,29再分为,13,6和29
算法分析
- 时间复杂度:归并排序的运行时间最差、最好和平均都是O(NlogN)
- 稳定性:归并排序是稳定的,由于没有发生数据交换
- 空间复杂度:空间复杂度为O(N)
二叉树排序
基本原理
二叉树排序就是利用二叉搜索树的特点进行排序,二叉搜索树的特点是,左子节点比自己小,右子节点比自己大,那么二叉树排序的思想就是先将待排序序列逐个添加到二叉搜索树中去,再通过中序遍历二叉搜索树就可以将数据从小到大取出来。
算法实现
|
|
算法示例
略
算法分析
- 时间复杂度:二叉树的插入时间复杂度为O(logN),所以二叉树排序算法的时间复杂度为O(NlogN),
- 稳定性:稳定
- 空间复杂度:空间复杂度为O(N)
堆排序
基本原理
堆是一个完全二叉树,节点大于或等于自己的子节点。堆排序就是利用完全二叉树的结构将待排序的数据项依次添加到堆中,建立大根堆或者小根堆,从堆中取出的数据项是从大到小或从小到大排列的。因为根节点永远是最大或最小的,而堆中永远是取根节点。
算法实现
|
|
算法示例
略
算法分析
- 时间复杂度:堆中插入和取出的时间复杂度均为O(logN),所以堆排序算法的时间复杂度为O(NlogN)
- 稳定性:稳定
- 空间复杂度:空间复杂度为O(N)
拓扑排序
基本原理
基于有向图的排序,见拓扑排序