《算法》学习笔记（排序）

基于比较的排序：

基于比较的算法至少使用$\lg{N!}$次比较将长度为N的数组排序。根据斯特灵公式近似得$\lg{N!}$~$N\lg{N}$

选择排序

• 算法：找到数组中最小的元素，与数组第一个元素交换位置；以此类推。
• 时间复杂度：需要进行$n^2/2$次比较，复杂度为$n^2$。
• 特点：
  （1）运行时间和输入无关。
  （2）数据移动最少，仅需$n$次。

插入排序

• 算法：（与冒泡类似）假设数组$0$到$i$位已经有序，观察第$i+1$位，依次与前$i$位比较，找到合适的位置插入这个新元素。
• 时间复杂度：平均需要$n^2/4$次比较和$n^2/4$次交换。最坏需要$n^2/2$次比较和$n^2/2$次交换，最好需要$n-1$次比较和0次交换。
• 特点：插入排序对部分有序的数组特别高效。

希尔排序

• 算法：本质是对插入排序的一种改进算法。对于一个较大的间隔h，用插入排序将数组排序为h有序的状态，随后逐步缩小h至1，实现整个数组的排序。实质是将各子数组调整为部分有序状态，为插入排序的高效提供保证。
• 时间复杂度：取决于h的变化序列。一般可以在$N^{3/2}$ 以内。
• 特点：不需要使用额外的空间，代码量小。

归并排序

• 算法：将两个有序数组归并成一个更大的有序数组。
• 时间复杂度：归并排序需要$\frac{1}{2}N\lg{N}$至$N\lg{N}$次比较，需要访问数组$6N\lg{N}$次。
• 特点：空间复杂度较高，访问数组次数较多。

快速排序

• 算法：每次以一个（往往是任取的）元素为基准，将比它小的元素移到一侧，大的元素移动到另一侧。
• 时间复杂度：平均需要$~2N\ln{N}$次比较，最多需要$N^2/2$次比较。
• 特点：虽然快排比归并排序的标胶次数更多，但移动数据的次数更少，所以往往快速排序的速度更快。对于小数组，快速排序比插入排序慢；对大型数组，经过调整的快速排序往往比其他基于比较的排序算法更快。

优先队列

定义：当一颗二叉树的每个结点都大于等于它的两个子节点，它被称为堆有序
定义：二叉堆是一组能够用堆有序的完全二叉树排序的元素，并在数组中按照层级存储（不使用数组的第一个位置）

堆排序：

• 算法：分两个阶段，在堆的构造阶段，将数组重新组织安排进一个堆中，然后在下沉排序阶段，从堆中顺序的取出（最大或最小）元素并得到排序结果。
• 时间复杂度：用下沉操作构造含N个元素的堆只需要少于2N次比较以及N次交换。将这个堆排序，只需要少于$2N\lg{N}$次比较，总共$2N\lg{N}+2N$次比较。