文章目录
排序算法说明
topK问题
https://blog.csdn.net/z50L2O08e2u4afToR9A/article/details/82837278
排序的定义
对一序列对象根据某个关键字进行排序。
术语说明
- 稳定:如果a原本在b前面,而a=b,排序之后a仍然在b的前面;
- 不稳定:如果a原本在b的前面,而a=b,排序之后a可能会出现在b的后面;
- 内排序:所有排序操作都在内存中完成;
- 外排序:由于数据太大,因此把数据放在磁盘中,而排序通过磁盘和内存的数据传输才能进行;
- 时间复杂度: 一个算法执行所耗费的时间。
- 空间复杂度:运行完一个程序所需内存的大小。
算法时间复杂度、空间复杂度、稳定性总结
- 图片名词解释:
- n: 数据规模
- k: “桶”的个数
- In-place: 占用常数内存,不占用额外内存
- Out-place: 占用额外内存
算法分类
比较和非比较的区别
常见的快速排序、归并排序、堆排序、冒泡排序等属于比较排序。在排序的最终结果里,元素之间的次序依赖于它们之间的比较。每个数都必须和其他数进行比较,才能确定自己的位置。
在冒泡排序之类的排序中,问题规模为n,又因为需要比较n次,所以平均时间复杂度为O(n²)。在归并排序、快速排序之类的排序中,问题规模通过分治法消减为logN次,所以时间复杂度平均O(nlogn)。
比较排序的优势是,适用于各种规模的数据,也不在乎数据的分布,都能进行排序。可以说,比较排序适用于一切需要排序的情况。
计数排序、基数排序、桶排序则属于非比较排序。非比较排序是通过确定每个元素之前,应该有多少个元素来排序。针对数组arr,计算arr之前有多少个元素,则唯一确定了arr在排序后数组中的位置。
非比较排序只要确定每个元素之前的已有的元素个数即可,所有一次遍历即可解决。算法时间复杂度O(n)。
非比较排序时间复杂度底,但由于非比较排序需要占用空间来确定唯一位置。所以对数据规模和数据分布有一定的要求。
冒泡排序
冒泡排序是一种简单的排序算法。它重复地走访过要排序的数列,一次比较两个元素,如果它们的顺序错误就把它们交换过来。走访数列的工作是重复地进行直到没有再需要交换,也就是说该数列已经排序完成。这个算法的名字由来是因为越小的元素会经由交换慢慢“浮”到数列的顶端。
算法描述
- 比较相邻的元素。如果第一个比第二个大,就交换它们两个;
- 对每一对相邻元素作同样的工作,从开始第一对到结尾的最后一对,这样在最后的元素应该会是最大的数;
- 针对所有的元素重复以上的步骤,除了最后一个;
重复步骤1~3,直到排序完成。
时间复杂度
- 冒泡排序是一种用时间换空间的排序方法,n小时好
- 最坏情况是把顺序的排列变成逆序,或者把逆序的数列变成顺序,最差时间复杂度O(N^2)只是表示其操作次数的数量级
- 最好的情况是数据本来就有序,复杂度为O(n)
- 平均时间复杂度为O(n^2)
- 最佳情况:T(n) = O(n)
- 最差情况:T(n) = O(n^2)
- 平均情况:T(n) = O(n^2)
空间复杂度
T(n) = O(1)
稳定性
稳定
代码实现
public static int[] bubbleSort(int[] array){
boolean didSwap;
for (int i = 0; i < array.length - 1; i++) {
didSwap = false;
for (int j = 0;j<array.length-1-i;j++){
if (array[j+1] > array[j]){
didSwap = true;
int temp = array[j+1];
array[j+1] = array[j];
array[j] = temp;
}
}
if (didSwap){
System.out.print("第"+(i+1)+"次排序结果: ");
for (int i1 : array) {
System.out.print(i1+"\t");
}
System.out.println();
}else {
break;
}
}
System.out.print("最终排序结果: ");
for (int i1 : array) {
System.out.print(i1+"\t");
}
System.out.println();
return array;
}
选择排序(Selection Sort)
表现最稳定的排序算法之一,因为无论什么数据进去都是O(n2)的时间复杂度,所以用到它的时候,数据规模越小越好。唯一的好处可能就是不占用额外的内存空间了吧。理论上讲,选择排序可能也是平时排序一般人想到的最多的排序方法了吧。
选择排序(Selection-sort)是一种简单直观的排序算法。它的工作原理:首先在未排序序列中找到最小(大)元素,存放到排序序列的起始位置,然后,再从剩余未排序元素中继续寻找最小(大)元素,然后放到已排序序列的末尾。以此类推,直到所有元素均排序完毕。
算法描述
- 从a[0]-a[N-1]中选出最小的数据,然后与a[0]交换位置
- 从a[1]-a[N-1]中选出最小的数据,然后与a[1]交换位置(第1步结束后a[0]就是N个数的最小值)
- 从a[2]-a[N-1]中选出最小的数据,然后与a[2]交换位置(第2步结束后a[1]就是N-1个数的最小值)
- 以此类推,N-1次排序后,待排数据就已经按照从小到大的顺序排列了。
时间复杂度
- 最佳情况:T(n) = O(n^2)
- 最差情况:T(n) = O(n^2)
- 平均情况:T(n) = O(n^2)
空间复杂度
T(n) = O(1)
稳定性
不稳定
代码实现
public static int[] selectionSort(int[] array){
if (array.length == 0){
return array;
}
for (int i = 0; i < array.length; i++) {
int minIndex = i;
for (int j = i; j < array.length; j++) {
if (array[j]<array[i]){
minIndex = j;
}
}
int tmp = array[i];
array[i] = array[minIndex];
array[minIndex] = tmp;
System.out.print("第"+(i+1)+"次排序结果: ");
for (int i1 : array) {
System.out.print(i1+"\t");
}
System.out.println();
}
System.out.print("最终排序结果: ");
for (int i1 : array) {
System.out.print(i1+"\t");
}
System.out.println();
return array;
}
插入排序(Insertion Sort)
插入排序(Insertion-Sort)的算法描述是一种简单直观的排序算法。它的工作原理是通过构建有序序列,对于未排序数据,在已排序序列中从后向前扫描,找到相应位置并插入。插入排序在实现上,通常采用in-place排序(即只需用到O(1)的额外空间的排序),因而在从后向前扫描过程中,需要反复把已排序元素逐步向后挪位,为最新元素提供插入空间。
算法描述
- 从第一个元素开始,该元素可以认为已经被排序;
- 取出下一个元素,在已经排序的元素序列中从后向前扫描;
- 如果该元素(已排序)大于新元素,将该元素移到下一位置;
- 重复步骤3,直到找到已排序的元素小于或者等于新元素的位置;
- 将新元素插入到该位置后;
时间复杂度
最佳情况:T(n) = O(n)
最坏情况:T(n) = O(n^2)
平均情况:T(n) = O(n^2)
空间复杂度
T(n) = O(1)
稳定性
稳定
代码实现
public static int[] insertionSort(int[] array){
if (array.length == 0){
return array;
}
for (int i = 0; i < array.length - 1; i++) {
int tmp = array[i + 1];
int j = i;
while (j >= 0 && array[j] > tmp){
array[j+1] = array[j];
j--;
}
array[j + 1] = tmp;
printResult(array);
}
printResult(array);
return array;
}
public static void printResult(int[] array){
System.out.print("排序结果: ");
for (int i1 : array) {
System.out.print(i1+"\t");
}
System.out.println();
}
希尔排序(Shell Sort)
希尔排序是希尔(Donald Shell)于1959年提出的一种排序算法。希尔排序也是一种插入排序,它是简单插入排序经过改进之后的一个更高效的版本,也称为缩小增量排序,同时该算法是冲破O(n2)的第一批算法之一。它与插入排序的不同之处在于,它会优先比较距离较远的元素。希尔排序又叫缩小增量排序。
希尔排序是把记录按下表的一定增量分组,对每组使用直接插入排序算法排序;随着增量逐渐减少,每组包含的关键词越来越多,当增量减至1时,整个文件恰被分成一组,算法便终止。
算法描述
我们来看下希尔排序的基本步骤,在此我们选择增量gap=length/2,缩小增量继续以gap = gap/2的方式,这种增量选择我们可以用一个序列来表示,{n/2,(n/2)/2…1},称为增量序列。希尔排序的增量序列的选择与证明是个数学难题,我们选择的这个增量序列是比较常用的,也是希尔建议的增量,称为希尔增量,但其实这个增量序列不是最优的。此处我们做示例使用希尔增量。
先将整个待排序的记录序列分割成为若干子序列分别进行直接插入排序,具体算法描述:
选择一个增量序列t1,t2,…,tk,其中ti>tj,tk=1;
按增量序列个数k,对序列进行k 趟排序;
每趟排序,根据对应的增量ti,将待排序列分割成若干长度为m 的子序列,分别对各子表进行直接插入排序。仅增量因子为1 时,整个序列作为一个表来处理,表长度即为整个序列的长度。
空间复杂度
T(n) = O(1)
稳定性
不稳定
代码实现
public static int[] shellSort(int[] array){
int len = array.length;
int gep = len/2;
int tmp;
while (gep>0){
for (int i = gep; i < len; i++) {
tmp = array[i];
int preIndex = i - gep;
while (preIndex >= 0 && tmp < array[preIndex]){
array[preIndex + gep] = array[preIndex];
preIndex-=gep;
}
array[preIndex + gep] = tmp;
}
Utils.printResult(array);
gep/=2;
}
Utils.printResult(array);
return array;
}
归并排序(Merge Sort)
和选择排序一样,归并排序的性能不受输入数据的影响,但表现比选择排序好的多,因为始终都是O(n log n)的时间复杂度。代价是需要额外的内存空间。
归并排序是建立在归并操作上的一种有效的排序算法。该算法是采用分治法(Divide and Conquer)的一个非常典型的应用。归并排序是一种稳定的排序方法。将已有序的子序列合并,得到完全有序的序列;即先使每个子序列有序,再使子序列段间有序。若将两个有序表合并成一个有序表,称为2-路归并。
算法描述
- 把长度为n的输入序列分成两个长度为n/2的子序列;
- 对这两个子序列分别采用归并排序;
- 将两个排序好的子序列合并成一个最终的排序序列。
时间复杂度
- n大时好,归并比较占用内存,内存随n的增大而增大,但却是效率高且稳定的排序算法。
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(nlogn)
- 平均情况:T(n) = O(nlogn)
空间复杂度
T(n) = O(n)
稳定性
稳定
代码实现
public static int[] mergeSort(int array[]){
if (array.length<2){
return array;
}
int mid = array.length/2;
int[] left = Arrays.copyOfRange(array,0,mid);
int[] right = Arrays.copyOfRange(array,mid,array.length);
Utils.printResult(array);
return merge(mergeSort(left),mergeSort(right));
}
public static int[] merge(int[] left,int[] right){
int result[] = new int[left.length+right.length];
for (int index = 0, i = 0, j = 0; index < result.length; index++){
if (i >= left.length){ //越界
result[index] = right[j++];
}else if (j >= right.length){ //越界
result[index] = left[i++];
}else if (left[i] < right[j]){
result[index] = left[i++];
}else{
result[index] = right[j++];
}
}
return result;
}
快速排序(Quick Sort)
快速排序的基本思想:通过一趟排序将待排记录分隔成独立的两部分,其中一部分记录的关键字均比另一部分的关键字小,则可分别对这两部分记录继续进行排序,以达到整个序列有序。
算法描述
快速排序使用分治法来把一个串(list)分为两个子串(sub-lists)。具体算法描述如下:
从数列中挑出一个元素,称为 “基准”(pivot);
重新排序数列,所有元素比基准值小的摆放在基准前面,所有元素比基准值大的摆在基准的后面(相同的数可以到任一边)。在这个分区退出之后,该基准就处于数列的中间位置。这个称为分区(partition)操作;
递归地(recursive)把小于基准值元素的子数列和大于基准值元素的子数列排序。
时间复杂度
- n大时好,快速排序比较占用内存,内存随n的增大而增大,但却是效率高不稳定的排序算法。
- 划分之后一边是一个,一边是n-1个,
这种极端情况的时间复杂度就是O(N^2) - 最好的情况是每次都能均匀的划分序列,O(N*log2N)
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(n^2)
- 平均情况:T(n) = O(nlogn)
空间复杂度
T(n) = O(nlogn)
稳定性
不稳定
代码实现
public static void quickSort(int[] array,int low, int high){
if (low < high){
int mid = partition(array,low,high);
quickSort(array,low ,mid-1);
quickSort(array,mid+1,high);
}
}
public static int partition(int[] array, int left, int right){
int tmp = array[left];
while (left < right){
while (left < right && tmp <= array[right]){
right --;
}
array[left] = array[right];
while (left < right && tmp >= array[left]){
left++;
}
array[right] = array[left];
}
array[left] = tmp;
return left;
}
整理
public static void quickSort(int[] array, int left, int right){
int high = right;
int low = left;
if (low < high){
int tmp = array[left];
while (left < right){
while (left < right && tmp < array[right]){
right --;
}
array[left] = array[right];
while (left < right && tmp > array[left]){
left++;
}
array[right] = array[left];
}
array[left] = tmp;
quickSort(array,low,left-1);
quickSort(array,left+1,high);
}
}
堆排序(Heap Sort)
堆排序(Heapsort)是指利用堆这种数据结构所设计的一种排序算法。堆积是一个近似完全二叉树的结构,并同时满足堆积的性质:即子结点的键值或索引总是小于(或者大于)它的父节点。
算法描述
- 将初始待排序关键字序列(R1,R2….Rn)构建成大顶堆,此堆为初始的无序区;
- 将堆顶元素R[1]与最后一个元素R[n]交换,此时得到新的无序区(R1,R2,……Rn-1)和新的有序区(Rn),且满足R[1,2…n-1]<=R[n];
- 由于交换后新的堆顶R[1]可能违反堆的性质,因此需要对当前无序区(R1,R2,……Rn-1)调整为新堆,然后再次将R[1]与无序区最后一个元素交换,得到新的无序区(R1,R2….Rn-2)和新的有序区(Rn-1,Rn)。不断重复此过程直到有序区的元素个数为n-1,则整个排序过程完成。
时间复杂度
- 最佳情况:T(n) = O(nlogn)
- 最差情况:T(n) = O(nlogn)
- 平均情况:T(n) = O(nlogn)
空间复杂度
T(n) = O(1)
稳定性
不稳定
代码实现
static int len; //声明全局变量,用于记录数组array的长度
public static int[] heapSort(int array[]){
len = array.length;
if (len < 1){
return array;
}
buildMaxHeap(array); //构建大根堆
while (len > 0){ //循环将首位(最大值)与末尾交换,然后调整大根堆
Utils.swap(array,0,len -1);
len --;
Utils.printResult(array);
adjustHeap(array,0);
}
return array;
}
/**
* 建立大根堆
* @param array
*/
public static void buildMaxHeap(int[] array){
for (int i = (len -1) / 2; i >= 0; i--){
adjustHeap(array,i);
}
}
/**
* 调整大根堆
* @param array
* @param i
*/
public static void adjustHeap(int[] array, int i){
int maxIndex = i;
//如果左子树存在,并且左子树大于父节点,则最大值指向左子树
if (i * 2 < len && array[i * 2] > array[maxIndex]){
maxIndex = i * 2;
}
//如果右子树存在,并且右子树大于父节点,则最大值指向右子树
if (i * 2 + 1 < len && array[i * 2 + 1] > array[maxIndex]){
maxIndex = i * 2 + 1;
}
//如果父节点不是最大值,则将父节点与最大值交换,并且递归调整与父节点交换的位置
if (maxIndex != i){
Utils.swap(array, maxIndex, i);
adjustHeap(array, maxIndex);
}
}
计数排序(Counting Sort)
计数排序不是基于比较的排序算法,其核心在于将输入的数据值转化为键存储在额外开辟的数组空间中。 作为一种线性时间复杂度的排序,计数排序要求输入的数据必须是有确定范围的整数。
算法描述
- 找出待排序的数组中最大和最小的元素;
- 统计数组中每个值为i的元素出现的次数,存入数组C的第i项;
- 对所有的计数累加(从C中的第一个元素开始,每一项和前一项相加);
- 反向填充目标数组:将每个元素i放在新数组的第C(i)项,每放一个元素就将C(i)减去1。
时间复杂度
- 最佳情况:T(n) = O(n+k)
- 最差情况:T(n) = O(n+k)
- 平均情况:T(n) = O(n+k)
空间复杂度
T(n) = O(n+k)
稳定性
稳定
代码实现
public static int[] countingSort(int[] array){
if (array.length == 0){
return array;
}
//最小值
int basic;
int min = array[0];
int max = array[0];
for (int i = 0; i < array.length; i++) {
if (min > array[i]){
min = array[i];
}
if (max < array[i]){
max = array[i];
}
}
basic = min;
//建立对应的桶
int bucket[] = new int[max - min + 1];
Arrays.fill(bucket,0);
//对应的桶计数
for (int i = 0; i < array.length; i++) {
bucket[array[i] - basic]++;
}
//反向填充目标数组
int index = 0;
for (int i = 0; i < array.length; i++) {
while (bucket[index] != 0){
array[i] = index + basic;
bucket[index]--;
}
index++;
}
return array;
}
桶排序(Bucket Sort)
桶排序是计数排序的升级版。它利用了函数的映射关系,高效与否的关键就在于这个映射函数的确定。桶排序 (Bucket sort)的工作的原理:假设输入数据服从均匀分布,将数据分到有限数量的桶里,每个桶再分别排序(有可能再使用别的排序算法或是以递归方式继续使用桶排序进行排)。
算法描述
- 设置一个定量的数组当作空桶;
- 遍历输入数据,并且把数据一个一个放到对应的桶里去;
- 对每个不是空的桶进行排序;
- 从不是空的桶里把排好序的数据拼接起来。
注意,如果递归使用桶排序为各个桶排序,则当桶数量为1时要手动减小BucketSize增加下一循环桶的数量,否则会陷入死循环,导致内存溢出。
时间复杂度
桶排序最好情况下使用线性时间O(n),桶排序的时间复杂度,取决与对各个桶之间数据进行排序的时间复杂度,因为其它部分的时间复杂度都为O(n)。很显然,桶划分的越小,各个桶之间的数据越少,排序所用的时间也会越少。但相应的空间消耗就会增大。
- 最佳情况:T(n) = O(n)
- 最差情况:T(n) = O(n+k)
- 平均情况:T(n) = O(n^2)
空间复杂度
T(n) = O(n+k)
稳定性
稳定
代码实现
public static ArrayList<Integer> bucketSort(ArrayList<Integer> array, int bucketSize){
if (array == null || array.size() < 2){
return array;
}
int max = array.get(0);
int min = array.get(0);
for (int i = 0; i < array.size(); i++) {
if (array.get(i) > max){
max = array.get(i);
}
if (array.get(i) < min){
min = array.get(i);
}
}
int bucketCount = (max - min) / bucketSize + 1;
ArrayList<ArrayList<Integer>> bucketArray = new ArrayList<>(bucketCount);
ArrayList<Integer> resultArray = new ArrayList<>();
for (int i = 0; i < bucketCount; i++) {
bucketArray.add(new ArrayList<>());
}
for (int i = 0; i < array.size(); i++) {
bucketArray.get((array.get(i) - min) / bucketSize).add(array.get(i));
}
for (int i = 0; i < bucketCount; i++) {
if (bucketCount == 1){
bucketSize --;
}
ArrayList<Integer> temp = bucketSort(bucketArray.get(i),bucketSize);
for (int j = 0; j < temp.size(); j++) {
resultArray.add(temp.get(j));
}
}
return resultArray;
}
基数排序(Radix Sort)
基数排序是按照低位先排序,然后收集;再按照高位排序,然后再收集;依次类推,直到最高位。有时候有些属性是有优先级顺序的,先按低优先级排序,再按高优先级排序。最后的次序就是高优先级高的在前,高优先级相同的低优先级高的在前。
算法描述
- 取得数组中的最大数,并取得位数;
- arr为原始数组,从最低位开始取每个位组成radix数组
- 对radix进行计数排序(利用计数排序适用于小范围数的特点)
时间复杂度
- 最佳情况:T(n) = O(d(n+r))
- 最差情况:T(n) = O(d(n+r))
- 平均情况:T(n) = O(d(n+r))
注:r代表关键字基数,d代表长度,n代表关键字个数
空间复杂度
T(n) = O®
稳定性
稳定
代码实现
public static int[] radixSort(int[] array){
if (array == null || array.length < 2){
return array;
}
//先找出最大值
int max = array[0];
for (int i = 0; i < array.length; i++) {
max = Math.max(max,array[i]);
}
int maxDigit = 0;
while (max != 0){
max /= 10;
maxDigit++;
}
int mod = 10;
int div = 1;
ArrayList<ArrayList<Integer>> bucketList = new ArrayList<>();
for (int i = 0; i < 10; i++) {
bucketList.add(new ArrayList<>());
}
for (int i = 0; i < maxDigit; i++, mod *= 10, div *= 10) {
for (int j = 0; j < array.length; j++){
int num = (array[j] % mod) / div;
bucketList.get(num).add(array[j]);
}
int index = 0;
for (int j = 0; j < bucketList.size(); j++) {
for (int k = 0; k < bucketList.get(j).size(); k++) {
array[index++] = bucketList.get(j).get(k);
}
bucketList.get(j).clear();
}
Utils.printResult(array);
}
return array;
}