9.中位数与顺序统计量

摘要:

  本章所讨论的问题是在一个由n个不同数值构成的集合中选择第i个顺序统计量问题。主要讲的内容是如何在线性时间内O(n)时间内在集合S中选择第i小的元素,最基本的是选择集合的最大值和最小值。一般情况下选择的元素是随机的,最大值和最小值是特殊情况,书中重点介绍了如何采用分治算法来实现选择第i小的元素,并借助中位数进行优化处理,保证最坏保证运行时间是线性的O(n)。

1、基本概念

顺序统计量:在一个由n个元素组成的集合中,第i个顺序统计量是值该集合中第i小的元素。例如最小值是第1个顺序统计量,最大值是第n个顺序统计量。

      中位数:一般来说,中位数是指它所在集合的“中间元素”,当n为奇数时,中位数是唯一的,出现位置为n/2;当n为偶数时候,存在两个中位数,位置分别为n/2(上中位数)和n/2+1(下中位数)。

2、选择问题描述

输入:一个包含n个(不同的)数的集合A和一个数i,1≤i≤n。

     输出:元素x∈A,它恰大于A中其他的i-1个元素。

最直接的办法就是采用一种排序算法先对集合A进行排序,然后输出第i个元素即可。可以采用前面讲到的归并排序、堆排序和快速排序,运行时间为O(nlgn)。接下来书中由浅入深的讲如何在线性时间内解决这个问题。

3、最大值和最小值

  要在集合中选择最大值和最小值,可以通过两两元素比较,并记录最大值和最小值,n元素的集合需要比较n-1次,这样运行时间为O(n)。举个例子来说明,现在要求和集合A={32,12,23,67,45,78}的最大值,开始假设第一个元素最大,即max=1,然后从第二个元素开始向后比较,记录最大值的位置。执行过程如下图所示:

书中给出的求最小值的伪代码如下:

MINMUN(A)
   min = A[1]
   for i=1 to length(A)
      do if min > A[i]
                then  min >= A[i]
  return min

问题:
(1)同时找出集合的最大值和最小值

方法1:按照上面讲到的方法,分别独立的找出集合的最大值和最小值,各用n-1次比较,共有2n-2次比较。

方法2:可否将最大值和最小值结合在一起寻找呢?答案是可以的,在两两比较过程中同时记录最大值和最小值,这样最大需要3n/2次比较。现在的做法不是将每一个      输入元素与当前的最大值和最小值进行比较,而是成对的处理元素,先将一对输入元素进行比较,然后把较大者与当前最大值比较,较小者与当前最小者比较,因此每两个元素需要3次比较。初始设置最大值和最小值方法:如何n为奇数,就将最大值和最小值都设置为第一个元素的值,然后成对的处理后续的元素。如果n为偶数,那么先比较前面两个元素的值,较大的设置为最大值,较小的设置为最小值,然后成对处理后续的元素。这样做的目的保证能够成对的处理后续的元素。举个例子说明这个过程,假设现在要找出集合A={32,23,12,67,45,78,10,39,9,58}最大值和最小值,执行过程如下:

从图中可以看出方法2要比方法一要好,减少了元素之间的比较次数。现在用C语言实现方法2,程序如下:

#include <stdio.h>
#include <stdlib.h>

//return max and min value by pointer
void get_max_min(int *datas,int length,int* ptrmax,int* ptrmin)
{
	int i,maxtmp,mintmp;
	//judge length is even or odd
	if(length %2 == 0)
	{
		if(datas[0] > datas[1])
		{
			*ptrmax = datas[0];
			*ptrmin = datas[1];
		}
		else
		{
			*ptrmax = datas[1];
			*ptrmin = datas[0];
		}
	}
	else
	{
		*ptrmax = datas[0];
		*ptrmin = datas[0];
	}
	for(i=2;i<length;i+=2)
	{
		if(datas[i] > datas[i+1])
		{
			maxtmp = datas[i];
			mintmp = datas[i+1];
		}
		else
		{
			maxtmp = datas[i+1];
			mintmp = datas[i];
		}
		if(*ptrmax < maxtmp)
			*ptrmax = maxtmp;
		if(*ptrmin > mintmp)
			*ptrmin = mintmp;
	}
}

int main()
{
	int max,min;
	int i;
	int datas[10] = {23,12,34,26,78,45,87,15,60,19};
	get_max_min(datas,10,&max,&min);
	printf("All elements in set are:\n");
	for(i=0;i<10;++i)
		printf("%d ",datas[i]);
	putchar(‘\n‘);
	printf("max=%d\tmin=%d\n",max,min);
	exit(0);
}

程序测试结果如下:

(2)如何找出找出n个元素中的第2小元素。

解答:类似与上面的同时找出最大值和最小值的方法2,变成同时找最小值和第2小元素值。先初始化最小值和第2小的值,然后成对比较后续的元素,找出较小的元素与当前最小值和第二小值进行比较,在三者中找出最小值和第二小值。

4、以期望线性时间做选择

  一般的选择问题似乎要比选择最大值和最小值要难,但是这两种问题的运行时间是相同的,都是θ(n)。书中介绍了采用分治算法解决一般的选择问题,其过程与快速排序过程中划分类似。每次划分集合可以确定一个元素的最终位置,根据这个位置可以判断是否是我们要求的第i小的元素。如果不是,那么我们只关心划分产出两个子部分中的其中一个,根据i的值来判断是前一个还是后一个,然后接着对子数组进行划分,重复此过程,直到找到第i个小的元素。划分可以采用随机划分,这样能够保证期望时间是θ(n)(假设所有元素是不同的)。

  给个例子说明此过程,假设现有集合A={32,23,12,67,45,78,10,39,9,58},要求其第5小的元素,假设在划分过程中以总是以最后一个元素为主元素进行划分。执行过程如下图所示:

书中给出了返回A[p...r]中的第i小元素的伪代码:

RANDOMIZED_SELECT(A,p,r,i)
	if p==r
		then return A[p]
	q = RANDOMIZED_PARTITION(A,p,r)
		k = q-p+1;
	if i==k
		then return A[q]
	else  if i<k
		then return RANDOMIZED_SELECT(A,p,q-1,i)
	else
	return RANDOMIZED_SELECT(A,p,q-1,i-k)

RANDOMIZED_SELECT通过对输入数组的递归划分来找出所求元素,该算法要保证对数组的划分是个好划分才更加高效。RANDOMIZED_SELECT的最坏情况运行时间为θ(n^2),即使是选择最小元素也是如此。因为在每次划分过程中,导致划分后两边不对称,总好是按照剩下元素中最大的划分进行。为了更好的选择过程,我采用C语言实现求集合A={32,23,12,67,45,78,10,39,9,58}的第i小的元素,完成程序如下:

#include <stdio.h>
#include <stdlib.h>
#include <time.h>

size_t  randomized_partition(int* datas,size_t beg,size_t last);
void swap(int* a,int *b);
int randomized_select_one(int* datas,int beg,int last,int i);
int randomized_select_two(int* datas,int length,int i);

int main()
{
	int datas[10]={32,23,12,67,45,78,10,39,9,58};
	int i,ret;
	printf("The array is: \n");
	for(i=0;i<10;++i)
		printf("%d ",datas[i]);
	printf("\n");
	for(i=1;i<=10;++i)
	{
		//ret=randomized_select_one(datas,0,9,i);
		ret=randomized_select_two(datas,10,i);
		printf("The %dth least number is: %d \n",i,datas[i-1]);
	}
	exit(0);
}
/*
参数介绍:datas是待划分的数组,数组下标从0开始。
beg代表开始位置,last代表结束位置、封闭区间[beg,last]
*/
size_t  randomized_partition(int* datas,size_t beg,size_t last)
{
	int len,i,j,index;
	len = last-beg+1;
	//随机获取一个主元
	srand(time(NULL));
	index = beg + rand()%len;
	//将主元交换到末尾
	swap(datas+index,datas+last);
	//从第一个元素开始向后查找主元的位置
	i=beg;
	for(j=beg;j<last;j++)
	{
		if(datas[j] < datas[last])
		{
			swap(datas+i,datas+j);
			i++;
		}
	}
	//最终确定主元的位置
	swap(datas+i,datas+last);
	return i;
}
/*
参数介绍:datas是待查找的数组,数组下标从0开始。
beg代表开始位置,last代表结束位置、封闭区间[beg,last]
i表示要要查找第i小元素,i从1开始
*/
int randomized_select_one(int* datas,int beg,int last,int i)
{
	int pivot,k;
	if(beg == last)
		return datas[beg];
	pivot = randomized_partition(datas,beg,last);
	k = pivot-beg+1;
	if(k == i)
		return datas[pivot];
	else if(k < i)
		randomized_select_one(datas,pivot+1,last,i-k);
	else
		randomized_select_one(datas,beg,pivot-1,i);
}
/*
参数介绍:datas是待查找的数组,数组下标从0开始。
length表示数组的长度,数组下标范围[0,length-1]
i表示要要查找第i小元素,i从1开始
*/
int randomized_select_two(int* datas,int length,int i)
{
	int pivot,k,j;
	if(length == 1)
		return datas[length-1];
	pivot = randomized_partition(datas,0,length-1);
	//确定是主元是第k小
	k = pivot+1;
	if(k == i)
		return datas[pivot];
	else if(k < i)
		randomized_select_two(datas+k,length-k,i-k);
	else
		randomized_select_two(datas,pivot,i);
}

void swap(int* a,int *b)
{
	int temp = *a;
	*a = *b;
	*b = temp;
}

程序测试结果如下所示:


程序中要注意的细节问题是:C语言中数组的小标是从0开始的,而要求第i小元素中的i是从1开始的,即第1小的元素对应与最终的主元位置0,依次类推。

5、最坏情况线性时间的选择

  SELECT算法的思想是要保证对数组的划分是个好的划分,对PARTITION过程进行了修改。现在通过SELECT算法来确定n个元素的输入数组中的第i小的元素,具体操作步骤如下:

(1)将输入数组的n个元素划分为n/5(上取整)组,每组5个元素,且至多只有一个组有剩下的n%5个元素组成。(为何是5,而不是其他数,有点不明白。)

(2)寻找每个组织中中位数。首先对每组中的元素(至多为5个)进行插入排序,然后从排序后的序列中选择出中位数。

(3)对第2步中找出的n/5(上取整)个中位数,递归调用SELECT以找出其中位数x。(如果是偶数去下中位数)

(4)调用PARTITION过程,按照中位数x对输入数组进行划分。确定中位数x的位置k。

(5)如果i=k,则返回x。否则,如果i<k,则在地区间递归调用SELECT以找出第i小的元素,若干i>k,则在高区找第(i-k)个最小元素。

SELECT算法通过中位数进行划分,可以保证每次划分是对称的,这样就能保证最坏情况下运行时间为θ(n)。举个例子说明此过程,求集合A={32,23,12,67,45,78,10,39,9,58,125,84}的第5小的元素,操作过程如下图所示:

现在采用C语言实现上面的例子,完整程序如下所示:

#include <stdio.h>
#include <stdlib.h>

int partition(int* datas,int beg,int last,int mid);
int select(int* datas,int length,int i);
void swap(int* a,int *b);

int main()
{
	int datas[12]={32,23,12,67,45,78,10,39,9,58,125,84};
	int i,ret;
	printf("The array is: \n");
	for(i=0;i<12;++i)
		printf("%d ",datas[i]);
	printf("\n");
	for(i=1;i<=12;++i)
	{
		ret=select(datas,12,i);
		printf("The %dth least number is: %d \n",i,datas[i-1]);
	}
	exit(0);
}

int partition(int* datas,int beg,int last,int mid)
{
	int i,j;
	swap(datas+mid,datas+last);
	i=beg;
	for(j=beg;j<last;j++)
	{
		if(datas[j] < datas[last])
		{
			swap(datas+i,datas+j);
			i++;
		}
	}
	swap(datas+i,datas+last);
	return i;
}

int select(int* datas,int length,int i)
{
	int groups,pivot;
	int j,k,t,q,beg,glen;
	int mid;
	int temp,index;
	int *pmid;
	if(length == 1)
		return datas[length-1];
	if(length % 5 == 0)
		groups = length/5;
	else
		groups = length/5 +1;
	pmid = (int*)malloc(sizeof(int)*groups);
	index = 0;
	for(j=0;j<groups;j++)
	{
		beg = j*5;
		glen = beg+5;
		for(t=beg+1;t<glen && t<length;t++)
		{
			temp = datas[t];
			for(q=t-1;q>=beg && datas[q] > datas[q+1];q--)
				swap(datas+q,datas+q+1);
			swap(datas+q+1,&temp);
		}
		glen = glen < length ? glen : length;
		pmid[index++] = beg+(glen-beg)/2;
	}
	for(t=1;t<groups;t++)
	{
		temp = pmid[t];
		for(q=t-1;q>=0 && datas[pmid[q]] > datas[pmid[q+1]];q--)
			swap(pmid+q,pmid+q+1);
		swap(pmid+q+1,&temp);
	}
	//printf("mid indx = %d,mid value=%d\n",pmid[groups/2],datas[pmid[groups/2]]);
	mid = pmid[groups/2];
	pivot = partition(datas,0,length-1,mid);
	//printf("pivot=%d,value=%d\n",pivot,datas[pivot]);
	k = pivot+1;
	if(k == i)
		return datas[pivot];
	else if(k < i)
		return select(datas+k,length-k,i-k);
	else
		return select(datas,pivot,i);

}

void swap(int* a,int *b)
{
	int temp = *a;
	*a = *b;
	*b = temp;
}

程序测试结果如下所示:

总结

  本章中的选择算法之所以具有线性运行时间,是因为这些算法没有进行排序,线性时间的行为并不是因为对输入做假设所得到的结果。

时间: 2024-10-15 02:17:25

9.中位数与顺序统计量的相关文章

算法导论第九章中位数和顺序统计量(选择问题)

本章如果要归结成一个问题的话,可以归结为选择问题,比如要从一堆数中选择最大的数,或最小的数,或第几小/大的数等, 这样的问题看似很简单,似乎没有什么可研究的必要,因为我们已经知道了排序算法,运用排序+索引的方式不就轻松搞定了?但细想,排序所带来的时间复杂度是不是让这个问题无形之中变得糟糕.那算法研究不就是要尽可能避免一个问题高复杂度地解决,让那些不敢肯定有无最优解的问题变得不再怀疑,这也是算法研究者所追求的一种极致哲学.既然排序让这个问题解决的性能无法确定,那我们就抛开排序,独立研究问题本身,看

第九章 中位数和顺序统计量 9.2 期望为线性时间的选择算法

package chap09_Medians_and_Order_Statistics; import static org.junit.Assert.*; import java.util.Random; import org.junit.Test; public class SearchAlorithms { /** * 分割(快速排序中对数组的分割) * * @param n * @param start * @param end * @return */ protected static

算法导论 中位数和顺序统计量(python)

第i个顺序统计量:该集合中第i小的元素(建集合排序后第i位 当然算法可以不排序) 中位数:集合中的中点元素 下中位数 上中位数 9.1最大值和最小值 单独的max或min每个都要扫一遍 n-1次比较 如果同时找max和min 要 :1.2个数相互比较 1次{每次选出2个 选n//2次} 2.大的和max比较 3.小的和min比较 找出序列为第i小的数Θ(n) 随机快速排序的运用:(可以回去看快排) 代码: import random def PARTTION(A,p,r): x = A[r] i

算法导论之七(中位数和顺序统计量之选择算法)

实际生活中,我们经常会遇到这类问题:在一个集合,谁是最大的元素?谁是最小的元素?或者谁是第二小的元素?....等等.那么如何在较短的时间内解决这类问题,就是本文要阐述的. 先来熟悉几个概念: 1.顺序统计量: 在一个由n个元素组成的集合中,第i个顺序统计量(order statistic)是该集合中第i小的元素.最小值是第1个顺序统计量(i=1),最大值是第n个顺序统计量(i=n).   2.中位数: 一个中位数是它所属集合的"中点元素",当n为奇数时,中位数是唯一的,位于i=(n+1

【算法导论】学习笔记——第9章 中位数和顺序统计量

在一个由n个元素组成的集合中,第i个顺序统计量(order statistic)是该集合中第i小的元素.用非形式化的描述来说,一个中位数(median)使它所属集合的“中点元素”.当n为奇数时,中位数是唯一的,位于i=(n+1)/2处.当n为偶数时,存在两个中位数,分别位于i=n/2和i=n/2+1处.因此不考虑n的奇偶性,中位数总是出现在i=floor((n+1)/2)处(下中位数)与i=ceil((n+1)/2)处(上中位数).本章将讨论一个由n个互异的元素构成的集合中选择第i个顺序统计量的

算法导论-中位数和顺序统计量

在一个由n个元素组成的集合中,第i个顺序统计量是该集合中第i小的元素.一个中位数是它所属集合的“中点元素”.当n为奇数时,中位数是唯一的,位于i=(n+1)/2处:当n为偶数时,存在两个中位数,分别位于i=n/2和i=n/2+1处.如果不考虑n的奇偶性,中位数总是出现在i=⌊(n+1)/2⌋处(下中位数)和i=⌈(n+2)/2⌉(上中位数). 1.最小值和最大值 在一个有n个元素的集合中,需要做n-1次(上界)比较才能找到最小值或最大值. int MiniValue(const int *A,

中位数和顺序统计量

摘要: 本章所讨论的问题是在一个由n个不同数值构成的集合中选择第i个顺序统计量问题.主要讲的内容是如何在线性时间内O(n)时间内在集合S中选择第i小的元素,最基本的是选择集合的最大值和最小值.一般情况下选择的元素是随机的,最大值和最小值是特殊情况,书中重点介绍了如何采用分治算法来实现选择第i小的元素,并借助中位数进行优化处理,保证最坏保证运行时间是线性的O(n). 1.基本概念 顺序统计量:在一个由n个元素组成的集合中,第i个顺序统计量是值该集合中第i小的元素.例如最小值是第1个顺序统计量,最大

[算法导论 Ch9 中位数和顺序统计量] Selection in O(n)

1. 寻找第k大(小)的数 假设数据存储在数组a[1..n]中 首先,寻找一个数组中最大或者最小的数,因为最大(小)的数一定要比其他所有的数大(小),因此至少要比较完所有的pair才能确定,所以时间复杂度在O(n).那么寻找第k大(小)呢? 比较直观的,就是对数组中国所有的数据先进行排序,在我们这种渣渣的计算机入门选手而言,可选的有QuickSort,MergeSort和HeapSort,甚至是ShellSort等一些比较高级的方法啊...一般的代价都在O(n*logn)上,然后直接取出即可.

算法导论—中位数与顺序统计量

一.选择最大值或者最小值的最优算法 对于长度为n的数组,已证找最大值或者最小值比较操作下界就是n-1.所以只需要让第一个值为初始最大值或者初始最小值,用所有的值与这个值比较,更新这个值即可. def minimum(a): minNum=a[0] for i in range(1,len(a)): if minNum>a[i]: minNum=a[i] return minNum print(minimum ([1,2,3,4,5,6,7,8,9])) 二.同时选择最大值和最小值的快速算法(成对