八大经典排序算法
排序算法 | 平均时间复杂 | 最好情况 | 最坏情况 | 空间复杂 | 稳定性 | 排序方式 |
---|---|---|---|---|---|---|
冒泡排序 | O(n²) | O(n) | O(n²) | O(1) | 稳定 | In-place |
选择排序 | O(n²) | O(n²) | O(n²) | O(1) | 不稳定 | In-place |
插入排序 | O(n²) | O(n) | O(n²) | O(1) | 稳定 | In-place |
希尔排序 | O(n log n) | O(n^1.3) | O(n²) | O(1) | 不稳定 | In-place |
归并排序 | O(n log n) | O(n log n) | O(n log n) | O(n) | 稳定 | Out-place |
快速排序 | O(n log n) | O(n log n) | O(n²) | O(1) | 不稳定 | In-place |
堆排序 | O(n log n) | O(n log n) | O(n log n) | O(1) | 不稳定 | In-place |
计数排序 | O(n+k) | O(n+k) | O(n+k) | O(k) | 稳定 | Out-place |
桶排序 | O(n+k) | O(n+k) | O(n²) | O(n+k) | 稳定 | Out-place |
基数排序 | O(d(n+r)) | O(d(n+r)) | O(d(n+r)) | O® | 稳定 | Out-place |
稳定性:排序后,关键字相同的元素保持原顺序不变
比较次数与序列初始状态无关:二分插入法、归并排序、简单选择排序
排序趟数与序列初始状态有关:冒泡、快速
1、冒泡算法
冒泡排序 是一种简单的排序算法。它重复地走访过要排序的数列,一次比较两个元素,如果它们的顺序错误就把它们交换过来。走访数列的工作是重复地进行直到没有再需要交换,也就是说该数列已经排序完成。这个算法的名字由来是因为越小的元素会经由交换慢慢“浮”到数列的顶端。
算法描述:
- 步骤1: 比较相邻的元素。如果第一个比第二个大,就交换它们两个;
- 步骤2: 对每一对相邻元素作同样的工作,从开始第一对到结尾的最后一对,这样在最后的元素应该会是最大的数;
- 步骤3: 针对所有的元素重复以上的步骤,除了最后一个;
- 步骤4: 重复步骤1~3,直到排序完成。
动画演示:
代码实现:
void BubbleSort(vector<int> &vec){
for(int i=0;i<vec.size();i++){
bool finish=false;
for(int j = 0;j<vec.size()-1-i;j++){
if(vec[j+1]<vec[j]){
finish=true;
swap(vec,j+1,j);
}
}
if(finish ==false) break;
}
}
算法分析:
- 最佳情况:T(n) = O(n)
- 最坏情况:T(n) = O(n2)
- 平均情况:T(n) = O(n2)
2、选择排序
选择排序(Selection-sort) 是一种简单直观的排序算法。它的工作原理:首先在未排序序列中找到最小(大)元素,存放到排序序列的末尾位置,然后,再从剩余未排序元素中继续寻找最小(大)元素,然后放到已排序序列的末尾。以此类推,直到所有元素均排序完毕。
算法描述:
n个记录的直接选择排序可经过n-1趟直接选择排序得到有序结果。具体算法描述如下:
- 步骤1:初始状态:无序区为R[1…n],有序区为空;
- 步骤2:第i趟排序(i=1,2,3…n-1)开始时,当前有序区和无序区分别为R[1…i-1]和R(i…n)。该趟排序从当前无序区中-选出关键字最小的记录 R[k],将它与无序区的第1个记录R交换,使R[1…i]和R[i+1…n)分别变为记录个数增加1个的新有序区和记录个数减少1个的新无序区;
- 步骤3:n-1趟结束,数组有序化了。
动画演示:
代码实现:
void selectionSort(vector<int> &vec){
for(int i=0;i<vec.size()-1;i++){
int temp=i;
for(int j=i+1;j<vec.size();j++){
if(vec[temp]>vec[j]) temp = j;
}
swap(vec,i,temp);
}
}
算法分析:
- 最佳情况:T(n) = O(n2)
- 最差情况:T(n) = O(n2)
- 平均情况:T(n) = O(n2)
3、插入排序
插入排序(Insertion-Sort) 的算法描述是一种简单直观的排序算法。它的工作原理是通过构建有序序列,对于未排序数据,在已排序序列中从后向前扫描,找到相应位置并插入。插入排序在实现上,通常采用in-place排序(即只需用到O(1)的额外空间的排序),因而在从后向前扫描过程中,需要反复把已排序元素逐步向后挪位,为最新元素提供插入空间。
算法描述:
一般来说,插入排序都采用in-place在数组上实现。具体算法描述如下:
- 步骤1: 从第一个元素开始,该元素可以认为已经被排序;
- 步骤2: 取出下一个元素,在已经排序的元素序列中从后向前扫描;
- 步骤3: 如果该元素(已排序)大于新元素,将该元素移到下一位置;
- 步骤4: 重复步骤3,直到找到已排序的元素小于或者等于新元素的位置;
- 步骤5: 将新元素插入到该位置后;
- 步骤6: 重复步骤2~5。
动画演示:
代码实现:
void insertionSort(vector<int> &vec){
if(vec.size()==0) return;
for(int i =0;i<vec.size()-1;i++){
int temp = vec[i+1];
int index = i;
while(index>=0 && temp<vec[index]){
vec[index+1] = vec[index];
index--;
}
vec[index+1] =temp;
}
}
算法分析:
- 最佳情况:T(n) = O(n)
- 最坏情况:T(n) = O(n2)
- 平均情况:T(n) = O(n2)
4、希尔排序
希尔排序是希尔(Donald Shell) 于1959年提出的一种排序算法。希尔排序也是一种插入排序,它是简单插入排序经过改进之后的一个更高效的版本,也称为缩小增量排序,同时该算法是冲破O(n2)的第一批算法之一。它与插入排序的不同之处在于,它会优先比较距离较远的元素。希尔排序又叫缩小增量排序。
希尔排序是把记录按下表的一定增量分组,对每组使用直接插入排序算法排序;随着增量逐渐减少,每组包含的关键词越来越多,当增量减至1时,整个文件恰被分成一组,算法便终止。
算法描述:
我们来看下希尔排序的基本步骤,在此我们选择增量gap=length/2,缩小增量继续以gap = gap/2的方式,这种增量选择我们可以用一个序列来表示,{n/2,(n/2)/2…1},称为增量序列。希尔排序的增量序列的选择与证明是个数学难题,我们选择的这个增量序列是比较常用的,也是希尔建议的增量,称为希尔增量,但其实这个增量序列不是最优的。此处我们做示例使用希尔增量。
先将整个待排序的记录序列分割成为若干子序列分别进行直接插入排序,具体算法描述:
- 步骤1:选择一个增量序列t1,t2,…,tk,其中ti>tj,tk=1;
- 步骤2:按增量序列个数k,对序列进行k 趟排序;
- 步骤3:每趟排序,根据对应的增量ti,将待排序列分割成若干长度为m 的子序列,分别对各子表进行直接插入排序。仅增量因子为1 时,整个序列作为一个表来处理,表长度即为整个序列的长度。
动画演示:
代码实现:
void ShellSort(vector<int> &vec){
int len = vec.size();
for(int gap = len>>1;gap>0;gap >>= 1){
for(int i=gap;i<len;i++){
for(int j=i;j-gap>=0&&vec[j-gap]>vec[j];j -= gap){
swap(vec,j-gap,j);
}
}
}
}
算法分析:
- 最佳情况:T(n) = O(nlog2n)
- 最坏情况:T(n) = O(nlog2n)
- 平均情况:T(n) =O(nlog2n)
5、归并排序
和选择排序一样,归并排序的性能不受输入数据的影响,但表现比选择排序好的多,因为始终都是O(n log n)的时间复杂度。代价是需要额外的内存空间。
归并排序 是建立在归并操作上的一种有效的排序算法。该算法是采用分治法(Divide and Conquer)的一个非常典型的应用。归并排序是一种稳定的排序方法。将已有序的子序列合并,得到完全有序的序列;即先使每个子序列有序,再使子序列段间有序。若将两个有序表合并成一个有序表,称为2-路归并。
算法描述:
- 步骤1:把长度为n的输入序列分成两个长度为n/2的子序列;
- 步骤2:对这两个子序列分别采用归并排序;
- 步骤3:将两个排序好的子序列合并成一个最终的排序序列。
动图演示 :
代码实现:
//合并
void Merge(vector<int> &vec,int left,int mid,int right,vector<int> &res){
int i = left;
int j = mid+1;
int t =0;
while(i<=mid&&j<=right){
if(vec[i]<vec[j]) res[t++] = vec[i++];
else res[t++] = vec[j++];
}
while(i<=mid) res[t++] = vec[i++];
while(j<=right) res[t++] = vec[j++];
for(int it =0;it<t;it++){
vec[left+it] = res[it];
}
}
//拆分
void Spilt(vector<int> &vec,int left,int right,vector<int> &res){
if(left<right){
int mid = (left+right)/2;
Spilt(vec,left,mid,res);
Spilt(vec,mid+1,right,res);
Merge(vec,left,mid,right,res);
}
}
//排序算法
void MergeSort(vector<int> &vec,int left,int right){
vector<int>res(vec.size(),0);
Spilt(vec,left,right,res);
res.clear();
}
算法分析:
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(nlogn)
- 平均情况:T(n) = O(nlogn)
6、快速排序
快速排序 的基本思想:通过一趟排序将待排记录分隔成独立的两部分,其中一部分记录的关键字均比另一部分的关键字小,则可分别对这两部分记录继续进行排序,以达到整个序列有序。
算法描述:
快速排序使用分治法来把一个串(list)分为两个子串(sub-lists)。具体算法描述如下:
- 步骤1:从数列中挑出一个元素,称为 “基准”(pivot );
- 步骤2:重新排序数列,所有元素比基准值小的摆放在基准前面,所有元素比基准值大的摆在基准的后面(相同的数可以到任一边)。在这个分区退出之后,该基准就处于数列的中间位置。这个称为分区(partition)操作;
- 步骤3:递归地(recursive)把小于基准值元素的子数列和大于基准值元素的子数列排序。
动画演示:
代码实现:
void quickSort(vector<int> &vec,int start,int end){
if(start>=end) return;
int low =start;
int high = end;
int pivot = vec[low];
while(low<high){
while(low<high && pivot<vec[high]) high--;
vec[low] = vec[high];
while(low<high && pivot>=vec[low]) low++;
vec[high] = vec[low];
}
vec[low] = pivot;
quickSort(vec,start,low-1);
quickSort(vec,low+1,end);
}
算法分析:
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(n2)
- 平均情况:T(n) = O(nlogn)
7、堆排序
堆排序(Heapsort) 是指利用堆这种数据结构所设计的一种排序算法。堆积是一个近似完全二叉树的结构,并同时满足堆积的性质:即子结点的键值或索引总是小于(或者大于)它的父节点。
算法描述:
- 步骤1:将初始待排序关键字序列(R1,R2….Rn)构建成大顶堆,此堆为初始的无序区;
- 步骤2:将堆顶元素R[1]与最后一个元素R[n]交换,此时得到新的无序区(R1,R2,……Rn-1)和新的有序区(Rn),且满足R[1,2…n-1]<=R[n];
- 步骤3:由于交换后新的堆顶R[1]可能违反堆的性质,因此需要对当前无序区(R1,R2,……Rn-1)调整为新堆,然后再次将R[1]与无序区最后一个元素交换,得到新的无序区(R1,R2….Rn-2)和新的有序区(Rn-1,Rn)。不断重复此过程直到有序区的元素个数为n-1,则整个排序过程完成。
动画演示:
代码实现:
void adjust(vector<int>& vec,int len,int index)
{
int left = 2*index+1;
int right = 2*index+2;
int maxi = index;
if(left<len && vec[left]>vec[maxi]) maxi=left;
if(right<len && vec[right]>vec[maxi]) maxi = right;
if(maxi!=index)
{
swap(vec[index],vec[maxi]);
adjust(vec,len,maxi);
}
}
void bulidmaxheap(vector<int> &vec)
{
int n=vec.size();
for(int i=n/2-1;i>=0;i--)
{
adjust(vec,n,i);
}
}
void headsort(vector<int> &vec)
{
bulidmaxheap(vec);
for(int i=vec.size()-1;i>0;i--){
swap(vec[i],vec[0]);
adjust(vec,i,0);
}
}
算法分析:
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(nlogn)
- 平均情况:T(n) = O(nlogn)
8、基数排序
基数排序也是非比较的排序算法,对每一位进行排序,从最低位开始排序,复杂度为O(n*k),为数组长度,k为数组中的数的最大的位数;
基数排序是按照低位先排序,然后收集;再按照高位排序,然后再收集;依次类推,直到最高位。有时候有些属性是有优先级顺序的,先按低优先级排序,再按高优先级排序。最后的次序就是高优先级高的在前,高优先级相同的低优先级高的在前。基数排序基于分别排序,分别收集,所以是稳定的。
算法描述:
- 步骤1:取得数组中的最大数,并取得位数;
- 步骤2:vecvet为原始数组,从最低位开始取每个位组成radix数组;
- 步骤3:对radix进行计数排序(利用计数排序适用于小范围数的特点)
动画演示:
代码实现:
void radixsort(vector<int> &vec){
int len =vec.size();
int d = 1; //保存最大的位数
int p = 10;
for(int i = 0; i < len; ++i)
{
while(vec[i] >= p)
{
p *= 10;
++d;
}
}
int base =1;
vector<int> temp(len);//存放中间结果的临时数组
vector<int> count(10);//存放某一位相同数字个数
while(d--){ //做digit次的计数排序
count.clear();
count.resize(10);
for(int i =0;i<len;i++){
int index = (vec[i]/base)%10;
count[index] += 1;
}
for(int j =1;j<10;j++){
count[j] += count[j-1]; //将tmp中的位置依次分配给每个桶
}
for(int j=len-1;j>=0;j--){
int k = (vec[j]/base)%10;
temp[--count[k]] = vec[j];
}
vec.swap(temp); //将tmp数组中的元素拷回原数组
base *= 10;
}
}
算法分析:
- 最佳情况:T(n) =O(d(n+r))
- 最差情况:T(n) =O(d(n+r))
- 平均情况:T(n) =O(d(n+r))
基数排序需要进行d趟分配和收集,一趟分配需要O(n),一趟收集需要O®
所以基数排序需要时间复杂度O(d(n+r)),与初始序列无关
基数排序 vs 计数排序 vs 桶排序
这三种排序算法都利用了桶的概念,但对桶的使用方法上有明显差异:
- 基数排序: 根据键值的每位数字来分配桶
- 计数排序: 每个桶只存储单一键值
- 桶排序: 每个桶存储一定范围的数值