数据结构入门 — 时间复杂度、空间复杂度

前言

数据结构_空间复杂度_时间复杂度讲解_常见复杂度对比

本文介绍数据结构中的时间复杂度和空间复杂度
***文章末尾，博主进行了概要总结，可以直接看总结部分***

博主博客链接：https://blog.csdn.net/m0_74014525

点点关注，后期持续更新系列文章

---

文章目录

• 前言
• 一、算法效率
• 二、时间复杂度
• • [1. 时间复杂度的定义](#1. 时间复杂度的定义)
  • [2. 大O的渐进表示法](#2. 大O的渐进表示法)
  • [3. 时间复杂度计算举例](#3. 时间复杂度计算举例)
• 三、空间复杂度
• • [1. 空间复杂度的定义](#1. 空间复杂度的定义)
  • [2. 空间复杂度计算举例](#2. 空间复杂度计算举例)
• 四、常见复杂度对比
• • [1. 常见的时间复杂度及其对应的算法](#1. 常见的时间复杂度及其对应的算法)
  • [2. 常见复杂度的对比](#2. 常见复杂度的对比)
• 总结

---

一、算法效率

算法效率指的是算法在处理数据时所消耗的时间和空间资源的多少。

算法效率通常由时间复杂度和空间复杂度来衡量。

时间复杂度： 表示算法在处理数据时所需要的运算次数与数据规模之间的关系。

空间复杂度： 表示算法在处理数据时所需要的存储空间与数据规模之间的关系。

算法效率的好坏直接影响到算法的执行速度和资源利用率，是算法设计时需要考虑的重要因素之一。

---

二、时间复杂度

1. 时间复杂度的定义

时间复杂度的定义：在计算机科学中，算法的时间复杂度是一个函数，它定量描述了该算法的运行时间。

一个算法执行所耗费的时间，从理论上说，是不能算出来的，只有你把你的程序放在机器上跑起来，才能知道。但是我们需要每个算法都上机测试吗？是可以都上机测试，但是这很麻烦，所以才有了时间复杂度这个分析方式。

一个算法所花费的时间与其中语句的执行次数成正比例，算法中的基本操作的执行次数，为算法的时间复杂度。

即：找到某条基本语句与问题规模N之间的数学表达式，就是算出了该算法的时间复杂度。

举例说明：

// 请计算一下Func1中++count语句总共执行了多少次？
void Func1(int N)
{
	int count = 0;
	for (int i = 0; i < N; ++i)
	{									//外层循环n次
		for (int j = 0; j < N; ++j)
		{
			++count;					//内层循环n次
										//n*n
		}
	}

	for (int k = 0; k < 2 * N; ++k)
	{
		++count;					//2*N 次
	}
	int M = 10;
	while (M--)
	{
		++count;					//循环10次
	}
	printf("%d\n", count);
}

Func1 执行的基本操作次数 ：

F ( N ) = N 2 + 2 ∗ N + 10 F(N)=N^2+2*N+10 F(N)=N2+2∗N+10

N = 10 F(N) = 130

N = 100 F(N) = 10210

N = 1000 F(N) = 1002010

实际中我们计算时间复杂度时，我们其实并不一定要计算精确的执行次数，而只需要大概执行次数，那么这里我们使用大O的渐进表示法。

使用大O的渐进表示法以后，Func1的时间复杂度为：

O ( N 2 ) O(N^2) O(N2)

N = 10 F(N) = 100

N = 100 F(N) = 10000

N = 1000 F(N) = 1000000

通过上面我们会发现大O的渐进表示法去掉了那些对结果影响不大的项，简洁明了的表示出了执行次数。

---

2. 大O的渐进表示法

大O表示法是算法时间复杂度的渐进表示法，表示算法的运行时间在最坏情况下的渐进上限。

大O符号（Big O notation）：是用于描述函数渐进行为的数学符号。

推导大O阶方法：

1、用常数1取代运行时间中的所有加法常数。

2、在修改后的运行次数函数中，只保留最高阶项。

3、如果最高阶项存在且不是1，则去除与这个项目相乘的常数。得到的结果就是大O阶。

有些算法的时间复杂度存在最好、平均和最坏情况：

最坏情况：任意输入规模的最大运行次数(上界)

平均情况：任意输入规模的期望运行次数

最好情况：任意输入规模的最小运行次数(下界)

在实际中一般情况关注的是算法的最坏运行情况
需要注意的是，大O表示法只关注算法的渐进时间复杂度，而不关注算法的具体实现细节和常数项。因此，两个算法的时间复杂度可能相同，但它们的实际运行时间可能差别很大，这需要具体问题具体分析。

---

3. 时间复杂度计算举例

实例1：

// 计算Func2的时间复杂度？
void Func2(int N)
{
	int count = 0;
	for (int k = 0; k < 2 * N; ++k)
	{
		++count;
	}
	int M = 10;
	while (M--)
	{
		++count;
	}
	printf("%d\n", count);
}

实例1解析：

上述算法基本操作执行了2N+10次，通过推导大O阶方法知道，时间复杂度为 O(N)

---

实例2：

// 计算Func3的时间复杂度？
void Func3(int N, int M)
{
	int count = 0;
	for (int k = 0; k < M; ++k)
	{
		++count;
	}
	for (int k = 0; k < N; ++k)
	{
		++count;
	}
	printf("%d\n", count);
}

实例2解析：

上述算法基本操作执行了M+N次，有两个未知数M和N，时间复杂度为 O(N+M)

---

实例3:

// 计算Func4的时间复杂度？
void Func4(int N)
{
	int count = 0;
	for (int k = 0; k < 100; ++k)
	{
		++count;
	}
	printf("%d\n", count);
}

实例3解析：

上述算法基本操作执行了10次，通过推导大O阶方法，时间复杂度为 O(1)

---

实例4:

// 计算strchr的时间复杂度？
const char * strchr ( const char * str, int character );

实例4解析：

上述算法基本操作执行最好1次，最坏N次，时间复杂度一般看最坏，时间复杂度为 O(N)

---

实例5:

// 计算BubbleSort的时间复杂度？
void BubbleSort(int* a, int n)
{
	assert(a);
	for (size_t end = n; end > 0; --end)
	{
		int exchange = 0;
		for (size_t i = 1; i < end; ++i)
		{
			if (a[i - 1] > a[i])
			{
				Swap(&a[i - 1], &a[i]);
				exchange = 1;
			}
		}
		if (exchange == 0)
			break;
	}
}

实例5解析：

上述算法基本操作执行最好N次，最坏执行了(N*(N+1)/2次，通过推导大O阶方法+时间复杂度一般看最坏，时间复杂度为 O(N^2)

---

实例6:

// 计算BinarySearch的时间复杂度？
int BinarySearch(int* a, int n, int x)
{
	assert(a);
	int begin = 0;
	int end = n - 1;
	// [begin, end]：begin和end是左闭右闭区间，因此有=号
	while (begin <= end)
	{
		int mid = begin + ((end - begin) >> 1);
		if (a[mid] < x)
			begin = mid + 1;
		else if (a[mid] > x)
			end = mid - 1;
		else
			return mid;
	}
	return -1;
}

实例6解析：

上述算法基本操作执行最好1次，最坏O(logN)次，时间复杂度为 O(logN)

ps：logN在算法分析中表示是底数为2，对数为N。有些地方会写成lgN。（建议通过折纸查找的方式讲解logN是怎么计算出的）

---

实例7:

// 计算阶乘递归Fac的时间复杂度？
long long Fac(size_t N)
{
	if (0 == N)
		return 1;

	return Fac(N - 1) * N;
}

实例7解析：

上述算法通过计算分析发现基本操作递归了N次，时间复杂度为O(N)。

---

实例8:

// 计算斐波那契递归Fib的时间复杂度？
long long Fib(size_t N)
{
	if (N < 3)
		return 1;

	return Fib(N - 1) + Fib(N - 2);
}

实例8解析：

实例8通过计算分析发现基本操作递归了2^N次，时间复杂度为O(2^N)。

---

三、空间复杂度

1. 空间复杂度的定义

空间复杂度也是一个数学表达式，是对一个算法在运行过程中临时占用存储空间大小的量度 。

空间复杂度不是程序占用了多少bytes的空间，因为这个也没太大意义，所以空间复杂度算的是变量的个数。空间复杂度计算规则基本跟实践复杂度类似，也使用大O渐进表示法。

注意：函数运行时所需要的栈空间(存储参数、局部变量、一些寄存器信息等)在编译期间已经确定好了，因此空间复杂度主要通过函数在运行时候显式申请的额外空间来确定。

---

2. 空间复杂度计算举例

实例1：

// 计算BubbleSort的空间复杂度？
void BubbleSort(int* a, int n)
{
	assert(a);
	for (size_t end = n; end > 0; --end)   		//end
	{
		int exchange = 0;           			//exchange
		for (size_t i = 1; i < end; ++i)		//i   
		{
			if (a[i - 1] > a[i])
			{
				Swap(&a[i - 1], &a[i]);
				exchange = 1;
			}
		}
		if (exchange == 0)
			break;
	}
}

实例1解析：

上面算法里用三个变量，为常数个变量

使用了常数个额外空间，所以空间复杂度为 O(1)

---

实例2：

// 计算Fibonacci的空间复杂度？
// 返回斐波那契数列的前n项
long long* Fibonacci(size_t n)
{
	if (n == 0)
		return NULL;

	long long* fibArray = (long long*)malloc((n + 1) * sizeof(long long));
	fibArray[0] = 0;
	fibArray[1] = 1;
	for (int i = 2; i <= n; ++i)
	{
		fibArray[i] = fibArray[i - 1] + fibArray[i - 2];
	}
	return fibArray;
}

实例2解析：

上面算法使用malloc动态内存函数开辟了N个空间

动态开辟了N个空间，空间复杂度为 O(N)

---

实例3：

// 计算阶乘递归Fac的空间复杂度？
long long Fac(size_t N)
{
	if (N == 0)
		return 1;

	return Fac(N - 1) * N;
}

实例3解析：

上述算法使用了递归

递归调用了N次，开辟了N个栈帧，每个栈帧使用了常数个空间。空间复杂度为O(N)

---

四、常见复杂度对比

1. 常见的时间复杂度及其对应的算法

大O渐进表示法	时间复杂度类型	算法的执行时间与输入规模关系	对应算法
O(1)	常数时间复杂度	表示算法的执行时间与输入规模无关	例如：访问数组元素、哈希表操作等。
O(log n)	对数时间复杂度	表示算法的执行时间与输入规模的对数相关	例如：二分查找、平衡二叉树操作等。
O(n)	线性时间复杂度	表示算法的执行时间与输入规模成线性关系	例如：线性查找、顺序遍历数组等。
O(n log n)	线性对数时间复杂度	表示算法的执行时间介于线性和对数之间	例如：归并排序、快速排序等。
O(n^2)	平方时间复杂度	表示算法的执行时间与输入规模的平方相关	例如：冒泡排序、选择排序等。
O(n^3)	立方时间复杂度	表示算法的执行时间与输入规模的立方相关	例如：矩阵乘法等。
O(2^n)	指数时间复杂度	表示算法的执行时间与输入规模的指数相关	例如：求解子集、穷举等。

---

2. 常见复杂度的对比

---

总结

时间复杂度和空间复杂度是用来衡量算法性能的两个重要指标。

时间复杂度表示算法的运行时间随着数据规模的增长而增长的趋势，通常用大O表示法来表示。时间复杂度越低，算法的效率越高。时间复杂度和数据规模之间的关系如下：

• 常数时间：O(1)
• 对数时间：O(log n)
• 线性时间：O(n)
• 线性对数时间：O(n log n)
• 平方时间：O(n^2)
• 立方时间：O(n^3)
• 指数时间：O(2^n)

空间复杂度表示算法所需内存空间增长的趋势，同样用大O表示法来表示。空间复杂度越低，算法所需内存空间越少。空间复杂度和数据规模之间的关系如下：

• 常数空间：O(1)
• 线性空间：O(n)
• 平方空间：O(n^2)

在实际应用中，我们要综合考虑时间复杂度和空间复杂度，找到一个性能和资源占用的平衡点，以实现最优的算法效果。时间复杂度和空间复杂度是用来衡量算法性能的两个重要指标。

---

如这篇博客对大家有帮助的话，希望 三连 支持 ！！！