基本的排序算法

一、基于比较的排序算法

定理1：基于比较的排序，时间复杂度下界为O(nlog2 n).

证明：对于n个排序元素，在没比较时，可能的正确结果有n!种。经过一次比较后，其中两个元素的顺序被确定，所以可能的正确结果剩余n!/2种，依次类推，直到经过m次比较，剩余可能性为n!/(2^m)种，直到小于等于1时，结果只剩一种。此时的比较次数m为O(nlog2 n)次。

1.1 选择排序

算法步骤：

• 首先在未排序序列中找到最小（大）元素，存放到排序序列的起始位置
• 再从剩余未排序元素中继续寻找最小（大）元素，然后放到已排序序列的末尾。
• 重复第二步，直到所有元素均排序完毕。

选择排序法需要进行n-1次选择，每次选择的时间复杂度为o(n)，所以选择排序的时间复杂度为O(n^2).

1.2 插入排序

算法步骤：

• 将第一待排序序列第一个元素看做一个有序序列，把第二个元素到最后一个元素当成是未排序序列。
• 从头到尾依次扫描未排序序列，将扫描到的每个元素插入有序序列的适当位置。（如果待插入的元素与有序序列中的某个元素相等，则将待插入元素插入到相等元素的后面。）
  
  插入排序需要