排序算法

排序算法分类：

排序算法分为两类：比较类和非比较类；

比较类排序：通过元素间比较来决定他们的相对次序，时间复杂度最大为O(nlogn)，也称之为非线性时间比较类排序；

非比较类排序：不通过元素间比较决定次序，可以突破基于比较排序的时间下界，以线性时间运行，因此也称为线性时间非比较类排序。

算法复杂度：

相关概念

• 稳定：如果a原本在b前面，而a=b，排序之后a仍然在b的前面。
• 不稳定：如果a原本在b的前面，而a=b，排序之后 a 可能会出现在 b 的后面。
• 时间复杂度：对排序数据的总的操作次数。反映当n变化时，操作次数呈现什么规律。
• 空间复杂度：是指算法在计算机内执行时所需存储空间的度量，它也是数据规模n的函数。

1、冒泡排序法（Bubble_Sort）

冒泡排序是一种简单的排序算法。它重复地走访过要排序的数列，一次比较两个元素，如果它们的顺序错误就把它们交换过来。走访数列的工作是重复地进行直到没有再需要交换，也就是说该数列已经排序完成。这个算法的名字由来是因为越小的元素会经由交换慢慢“浮”到数列的顶端。 

1.1 算法描述

• 比较相邻的元素。如果第一个比第二个大，就交换它们两个；
• 对每一对相邻元素作同样的工作，从开始第一对到结尾的最后一对，这样在最后的元素应该会是最大的数；
• 针对所有的元素重复以上的步骤，除了最后一个；
• 重复步骤1~3，直到排序完成。

1.2 动图演示

1.3 代码实现

//冒泡排序，时间复杂度O(n²)，空间复杂度O(1)，稳定
void Bubble_Sort(int* a, int len){
	for(int i = 0; i < len - 1; i++){
		for(int j = 0; j < len - 1 - i; j++){
			if(a[j] > a[j+1]){
				Sort_type temp = a[j];
				a[j] = a[j+1];
				a[j+1] = temp; 
			}
		}
	}
}

2、选择排序法（Selection_Sort）

选择排序(Selection-sort)是一种简单直观的排序算法。它的工作原理：首先在未排序序列中找到最小（大）元素，存放到排序序列的起始位置，然后，再从剩余未排序元素中继续寻找最小（大）元素，然后放到已排序序列的末尾。以此类推，直到所有元素均排序完毕。 

2.1 算法描述

n个记录的直接选择排序可经过n-1趟直接选择排序得到有序结果。具体算法描述如下：

• 初始状态：无序区为R[1..n]，有序区为空；
• 第i趟排序(i=1,2,3…n-1)开始时，当前有序区和无序区分别为R[1..i-1]和R(i..n）。该趟排序从当前无序区中-选出关键字最小的记录 R[k]，将它与无序区的第1个记录R交换，使R[1..i]和R[i+1..n)分别变为记录个数增加1个的新有序区和记录个数减少1个的新无序区；
• n-1趟结束，数组有序化了。

2.2 动图演示

2.3 代码实现

//选择排序，时间复杂度O(n²)，空间复杂度O(1),不稳定
void Selection_Sort(int *a, int len){	
	for(int i = 0; i < len - 1; i++){
		int max_index = 0;
		int j;
		for(j = 1; j <= len - 1 - i; j++){
			if(a[max_index] < a[j]){
				max_index = j;
			}
		}
		j--;
		Sort_type temp = a[j];
		a[j] = a[max_index];
		a[max_index] = temp;
	}
}

3、插入排序法（Insert_Sort）

插入排序（Insertion-Sort）的算法描述是一种简单直观的排序算法。它的工作原理是通过构建有序序列，对于未排序数据，在已排序序列中从后向前扫描，找到相应位置并插入。 

3.1 算法描述

一般来说，插入排序都采用in-place在数组上实现。具体算法描述如下：

• 从第一个元素开始，该元素可以认为已经被排序；
• 取出下一个元素，在已经排序的元素序列中从后向前扫描；
• 如果该元素（已排序）大于新元素，将该元素移到下一位置；
• 重复步骤3，直到找到已排序的元素小于或者等于新元素的位置；
• 将新元素插入到该位置后；
• 重复步骤2~5。

3.2 动图演示

3.3 代码实现

//插入排序，时间复杂度O(n²)，空间复杂度O(1),稳定
void Insertion_Sort(int* a, int len){
	int pre_index;
	Sort_type cur_value;
	for(int i = 1; i < len; i++){
		pre_index = i - 1;
		cur_value = a[i];
		while(pre_index >= 0 && cur_value < a[pre_index]){
			a[pre_index + 1] = a[pre_index];
			pre_index--;
		}
		a[pre_index + 1] = cur_value;
	}
}

4、希尔排序法（Shell_Sort）

1959年Shell发明，第一个突破O(n2)的排序算法，是简单插入排序的改进版。它与插入排序的不同之处在于，它会优先比较距离较远的元素。希尔排序又叫缩小增量排序。

4.1 算法描述

先将整个待排序的记录序列分割成为若干子序列分别进行直接插入排序，具体算法描述：

• 选择一个增量序列t1，t2，…，tk，其中ti>tj，tk=1；
• 按增量序列个数k，对序列进行k 趟排序；
• 每趟排序，根据对应的增量ti，将待排序列分割成若干长度为m 的子序列，分别对各子表进行直接插入排序。仅增量因子为1 时，整个序列作为一个表来处理，表长度即为整个序列的长度。

4.2 动图演示

4.3 代码实现

//希尔排序(缩小增量排序)，时间复杂度O(n1.3)，空间复杂度O(1),不稳定
void Shell_Sort(int* a, int len){
	for(int gap = len / 2; gap > 0; gap /= 2){
		for(int i = gap; i < len; i++){
			int j = i;
			Sort_type cur_value = a[i];
			while(j - gap >= 0 && cur_value < a[j - gap]){
				a[j] = a[j - gap];
				j -= gap;
			}
			a[j] = cur_value;
		}
	}
}

5、归并排序法（Merge_Sort）

归并排序是建立在归并操作上的一种有效的排序算法。该算法是采用分治法（Divide and Conquer）的一个非常典型的应用。将已有序的子序列合并，得到完全有序的序列；即先使每个子序列有序，再使子序列段间有序。若将两个有序表合并成一个有序表，称为2-路归并。  

5.1 算法描述

• 把长度为n的输入序列分成两个长度为n/2的子序列；
• 对这两个子序列分别采用归并排序；
• 将两个排序好的子序列合并成一个最终的排序序列。

5.2 动图演示

5.3 代码实现

//归并排序，时间复杂度O(nlog2(n))，空间复杂度O(n),稳定
void Merge(int* a, int start, int mid, int end){
	int left_len, right_len;
	int* Left = NULL;
	int* Right = NULL;
	left_len = mid - start + 1;
	right_len = end - mid;
	Left = (int*)malloc((left_len) * (sizeof(int)));
	Right = (int*)malloc((right_len) * (sizeof(int)));
	for(int i = 0; i < left_len; i++){
		Left[i] = a[start + i - 1];
	}
	for(int i = 0; i < right_len; i++){
		Right[i] = a[mid + i];
	}
	int i = 0, j = 0;
	for(int k = start - 1; k < end; k++){
		if(i >= left_len){
			a[k] = Right[j];
			j += 1;
		}
		else if(j >= right_len){
			a[k] = Left[i];
			i += 1;
		}
		else if(Left[i] <= Right[j]){
			a[k] = Left[i];
			i += 1;
		}
		else if(Left[i] > Right[j]){
			a[k] = Right[j];
			j += 1;
		}
	}
	free(Left);
	free(Right);
}

void Merge_Sort(int* a, int start, int end){
	int mid;
	if(start < end){
		mid = (start + end) / 2;
		Merge_Sort(a, start, mid);
		Merge_Sort(a, mid + 1, end);
		Merge(a, start, mid, end);
	}
}

6、快速排序法（Quick_Sort）

快速排序的基本思想：通过一趟排序将待排记录分隔成独立的两部分，其中一部分记录的关键字均比另一部分的关键字小，则可分别对这两部分记录继续进行排序，以达到整个序列有序。 

6.1 算法描述

快速排序使用分治法来把一个串（list）分为两个子串（sub-lists）。具体算法描述如下：

• 从数列中挑出一个元素，称为 “基准”（pivot）；
• 重新排序数列，所有元素比基准值小的摆放在基准前面，所有元素比基准值大的摆在基准的后面（相同的数可以到任一边）。在这个分区退出之后，该基准就处于数列的中间位置。这个称为分区（partition）操作；
• 递归地（recursive）把小于基准值元素的子数列和大于基准值元素的子数列排序。

6.2 动图演示

5.3 代码实现

//快速排序，时间复杂度O(nlog2(n))，空间复杂度O(nlog2(n))，不稳定
void Quick_Sort(int* a, int start, int end){
	if(start > end){
		return ;
	}
	Sort_type temp = a[start];
	int i = start, j = end;
	while(i != j){
		while(a[j] >= temp && j > i){
			j--;
		}
                if(j > i){
			a[i] = a[j];
		}
		while(a[i] <= temp && j > i){
			i++;
		}
		if(j > i){
			a[j] = a[i];
		}
	}
	a[j] = temp;
	Quick_Sort(a, start, i - 1);
	Quick_Sort(a, i + 1, end);
}

7、堆排序法（Heap_Sort）

堆排序（Heapsort）是指利用堆这种数据结构所设计的一种排序算法。堆积是一个近似完全二叉树的结构，并同时满足堆积的性质：即子结点的键值或索引总是小于（或者大于）它的父节点。

7.1 算法描述

• 将初始待排序关键字序列(R1,R2….Rn)构建成大顶堆，此堆为初始的无序区；
• 将堆顶元素R[1]与最后一个元素R[n]交换，此时得到新的无序区(R1,R2,……Rn-1)和新的有序区(Rn),且满足R[1,2…n-1]<=R[n]；
• 由于交换后新的堆顶R[1]可能违反堆的性质，因此需要对当前无序区(R1,R2,……Rn-1)调整为新堆，然后再次将R[1]与无序区最后一个元素交换，得到新的无序区(R1,R2….Rn-2)和新的有序区(Rn-1,Rn)。不断重复此过程直到有序区的元素个数为n-1，则整个排序过程完成。

7.2 动图演示

5.3 代码实现（数组）

//堆排序，时间复杂度O(nlog2(n))，空间复杂度O(1)，不稳定
void Build_Heap(int* a, int len){
	Sort_type temp;
	for(int i = len/2-1; i >= 0; i--){
		if((2*i+1) < len && a[i] < a[2*i+1]){
			temp = a[i];
			a[i] = a[2*i+1];
			a[2*i+1] = temp;
			if((2*(2*i+1)+1 < len && a[2*i+1] < a[2*(2*i+1)+1]) || (2*(2*i+1)+2 < len && a[2*i+1] < a[2*(2*i+1)+2])){
				Build_Heap(a, len);
			}
		}
		if((2*i+2) < len && a[i] < a[2*i+2]){
			temp = a[i];
			a[i] = a[2*i+2];
			a[2*i+2] = temp;
			if((2*(2*i+2)+1 < len && a[2*i+2] < a[2*(2*i+2)+1]) || (2*(2*i+2)+2 < len && a[2*i+2] < a[2*(2*i+2)+2])){
				Build_Heap(a, len);
			}
		}
	}
}

void Heap_Sort(int* a, int len){

	for(int i = len; i > 0; i--){
		Build_Heap(a, i);
		Sort_type temp = a[0];
		a[0] = a[i - 1];
		a[i - 1] = temp;
	}
}

8、计数排序（Counting_Sort）

计数排序不是基于比较的排序算法，其核心在于将输入的数据值转化为键存储在额外开辟的数组空间中。 作为一种线性时间复杂度的排序，计数排序要求输入的数据必须是有确定范围的整数。

8.1 算法描述

• 找出待排序的数组中最大和最小的元素；
• 统计数组中每个值为i的元素出现的次数，存入数组C的第i项；
• 对所有的计数累加（从C中的第一个元素开始，每一项和前一项相加）；
• 反向填充目标数组：将每个元素i放在新数组的第C(i)项，每放一个元素就将C(i)减去1。

8.2 动图演示

9、桶排序（Bucket_Sort）

桶排序是计数排序的升级版。它利用了函数的映射关系，高效与否的关键就在于这个映射函数的确定。桶排序 (Bucket sort)的工作的原理：假设输入数据服从均匀分布，将数据分到有限数量的桶里，每个桶再分别排序（有可能再使用别的排序算法或是以递归方式继续使用桶排序进行排）。

9.1 算法描述

• 设置一个定量的数组当作空桶；
• 遍历输入数据，并且把数据一个一个放到对应的桶里去；
• 对每个不是空的桶进行排序；
• 从不是空的桶里把排好序的数据拼接起来。 

9.2 图片演示

10、基数排序（Radix_Sort）

基数排序是按照低位先排序，然后收集；再按照高位排序，然后再收集；依次类推，直到最高位。有时候有些属性是有优先级顺序的，先按低优先级排序，再按高优先级排序。最后的次序就是高优先级高的在前，高优先级相同的低优先级高的在前。

10.1 算法描述

• 取得数组中的最大数，并取得位数；
• arr为原始数组，从最低位开始取每个位组成radix数组；
• 对radix进行计数排序（利用计数排序适用于小范围数的特点）；

10.2 动图演示