GoodCoder666的个人博客

【算法笔记】三种背包问题——背包 DP

2022-08-18 · 14 min read
算法笔记 算法竞赛

前言

背包(Knapsack)问题是经典的动态规划问题,也很有实际价值。

01背包

洛谷 P2871 [USACO07DEC] Charm Bracelet S
AtCoder Educational DP Contest D - Knapsack 1
nn个物品和一个总容量为WW的背包。第ii件物品的重量是wiw_i,价值是viv_i。求解将哪些物品装入背包可使这些物品的重量总和不超过背包容量,且价值总和最大。

knapsack

这是最原始的01背包问题(即每个物品只能选0011次)。下面我们来看如何求解。
fi,jf_{i,j}表示只考虑前ii个物品的情况下,容量为jj的背包所能装的最大总价值。则最终答案为fn,Wf_{n,W},状态转移方程为:

fi,j={0(i=0/j=0)max(fi1,j,fi1,jwi+vi)(i>0,jwi)f_{i,j}=\begin{cases} 0 & (i=0/j=0) \\ \max(f_{i-1,j},f_{i-1,j-w_i}+v_i) & (i>0,j\ge w_i) \end{cases}

依次递增ii,逐步增加问题规模即可求解。时间、空间复杂度均为O(nW)\mathcal O(nW)
在本题中,O(nW)\mathcal O(nW)的空间复杂度容易MLE,因此考虑使用数组重复利用或者滚动表的优化。

压缩掉ff的第一维,变成:

fj=max(fj,fjwi+vi)f_j=\max(f_j,f_{j-w_i}+v_i)

此时空间复杂度为O(W)\mathcal O(W)
一定要牢记这个公式,注意使用时需倒序枚举jj,防止串连转移。参考代码:

#include <cstdio>
#define setmax(x, y) if(x < y) x = y
using namespace std;

int f[12881];

int main()
{
	int n, m;
	scanf("%d%d", &n, &m);
	while(n--)
	{
		int w, v;
		scanf("%d%d", &w, &v);
		for(int i=m; i>=w; i--)
			setmax(f[i], f[i - w] + v);
	}
	printf("%d\n", f[m]);
	return 0;
}

01背包还有一种简单变形,即求最小剩余空间,此时用((总空间-最大可装空间))即可。

#include <cstdio>
#define setmax(x, y) if(x < y) x = y
using namespace std;

int f[20005];

int main()
{
	int n, v;
	scanf("%d%d", &v, &n);
	while(n--)
	{
		int w;
		scanf("%d", &w);
		for(int i=v; i>=w; i--)
			setmax(f[i], f[i - w] + w);
	}
	printf("%d\n", v - f[v]);
	return 0;
}

扩展:对付更大的WW

AtCoder Educational DP Contest E - Knapsack 2
本题和普通的01背包完全相同,只是数据范围改为n100,W109,vi103n\le 100,W\le 10^9,v_i\le 10^3

注意数据范围,W109W\le 10^9意味着只要开这么大的数组都会MLE,因此我们考虑修改dp状态。前看原来的dp状态,本质上就是“确定重量,求最大价值”,现在我们反过来,即“确定价值,求最小重量”。令fi,jf_{i,j}表示只用前ii个物品,达到总价值为jj所需的最小空间。由于n100,vi103n\le 100,v_i\le 10^3,所以vi105\sum v_i\le 10^5,极限情况下dp数组只需要开n×vi107n\times\sum v_i\approx10^7即可,相对而言会好很多。下面考虑dp状态转移方程:

fi,j={+(i=0,j0)0(i0,j=0)min(fi1,j,fi1,jvi+wi)(i>0,j>0)f_{i,j}=\begin{cases} +\infin & (i=0,j\ne0) \\ 0 & (i\ge 0,j=0) \\ \min(f_{i-1,j},f_{i-1,j-v_i}+w_i) & (i>0,j>0) \end{cases}

其中,i=0,j0i=0,j\ne 0这种情况不存在,所以初始值为++\infin。最终答案,即为最大的jj,使得fn,jWf_{n,j}\le W,更新状态时可同时记录这个答案。

这种算法的时间和空间都可以优化:

  • 时间:对于每个ii,循环迭代jj时只需到v1+v2++viv_1+v_2+\dots+v_i即可,因为当前的总价值不可能超过这个值;
  • 空间:用与前面完全相同的方法,压缩掉第一维空间,变成fj=min(fj,fjvi+wi)f_j=\min(f_j,f_{j-v_i}+w_i)(注意要倒序枚举jj

运用了两种优化的代码如下:

#include <cstdio>
#include <cstring>
using namespace std;

long long f[100005], t, tot, ans;

int main()
{
	int n, sz;
	scanf("%d%d", &n, &sz);
	memset(f, 0x3f, sizeof f);
	f[0] = 0;
	while(n--)
	{
		int w, v;
		scanf("%d%d", &w, &v);
		tot += v;
		for(int i=tot; i>=v; i--)
			if((t = f[i - v] + w) < f[i] && t <= sz)
			{
				f[i] = t;
				if(i > ans) ans = i;
			}
	}
	printf("%lld\n", ans);
	return 0;
}

完全背包

洛谷 P1616 疯狂的采药
nn个物品和一个总容量为WW的背包。第ii件物品的重量是wiw_i,价值是viv_i每个物品可以使用无限次。求解将哪些物品装入背包可使这些物品的重量总和不超过背包容量,且价值总和最大。

这种背包与01背包唯一的不同之处在于,每个物品使用次数不限,所以参考01背包的dp状态:
fi,jf_{i,j}表示只考虑前ii个物品的情况下,容量为jj的背包所能装的最大总价值,则有:

fi,j=maxk=0+{fi1,jk×wi}+vi×k=maxk=0jwi{fi1,jk×wi}+vi×k\begin{aligned} f_{i,j}=\max_{k=0}^{+\infin}\{f_{i-1,j-k\times w_i}\}+v_i\times k\\ =\max_{k=0}^{\lfloor\frac j{w_i}\rfloor}\{f_{i-1,j-k\times w_i}\}+v_i\times k \end{aligned}

可以发现,实际上只需要用fi,j=max(fi1,j,fi,jwi+vi)f_{i,j}=\max(f_{i-1,j},f_{i,j-w_i}+v_i)即可,因为此时的fi,jwif_{i,j-w_i}会被fi,j2wif_{i,j-2w_i}更新,fi,j2wif_{i,j-2w_i}又会被fi,j3wif_{i,j-3w_i}更新,以此类推,这样算与前面的公式等效。

对比一下01背包和完全背包的状态转移方程:

fi,j=max(fi1,j,fi1,jwi+vi)fi,j=max(fi1,j,fi,jwi+vi)\begin{aligned} f_{i,j}=\max(f_{i-1,j},f_{i-1,j-w_i}+v_i) \\ f_{i,j}=\max(f_{i-1,j},f_{i,j-w_i}+v_i) \end{aligned}

实际上,区别就在于一个是fi1,jwif_{i-1,j-w_i},一个是fi,jwif_{i,j-w_i}。所以仍可以使用数组压缩,只需要改变一下循环顺序,是不是很神奇?
long long别忘了~

#include <cstdio>
#define setmax(x, y) if(x < y) x = y
using namespace std;

long long f[10000005];

int main()
{
	int sz, n;
	scanf("%d%d", &sz, &n);
	while(n--)
	{
		int w, v;
		scanf("%d%d", &w, &v);
		for(int i=w; i<=sz; i++)
			setmax(f[i], f[i - w] + v);
	}
	printf("%lld\n", f[sz]);
	return 0;
}

多重背包

洛谷 P1776 宝物筛选
nn个物品和一个总容量为WW的背包。第ii件物品的重量是wiw_i,价值是viv_i最多能选择mim_i。我们要选择一些物品,使这些物品的重量总和不超过背包容量,且价值总和最大。n100,mi105,W4×104n\le100,\sum m_i\le10^5,W\le 4\times10^4

很容易想到,可以转换成每件物品都被拆分成mim_i个只能选一次的物品,即N=miN=\sum m_i的01背包。很明显,这样做的时间复杂度是O(Wmi)\mathcal O(W\sum m_i),会TLE。因此,我们可以优化拆分的方法,将mm转化为x+j=0i2jx+\sum\limits_{j=0}^i 2^j的形式,举几个栗子:

  • 5=(1+2)+25=(1+2)+2,其中i=1,x=2i=1,x=2
  • 16=(1+2+4+8)+116=(1+2+4+8)+1,其中i=3,x=1i=3,x=1
  • 31=(1+2+4+8+16)31=(1+2+4+8+16),其中i=4,x=0i=4,x=0

这种方法的正确性这里就不详细说明了,主要依赖于二进制的拼凑。容易发现,数字mm按这种拆分的方法会被拆分为log2m\lceil\log_2m\rceil个数字的和,因此总时间复杂度为O(Wi=1nlogmi)\mathcal O(W\sum\limits_{i=1}^n\log m_i),可以通过此题。

还有一种单调队列/单调栈优化,同样针对多重背包问题,时间复杂度为O(nW)\mathcal O(nW)有时不一定优于二进制优化,这里就不多说了。下面给出二进制优化的参考程序。

#include <cstdio>
#define maxw 40004
#define setmax(x, y) if(x < y) x = y
using namespace std;

int n, w, f[maxw];

inline void add(int a, int b) // a: value, b: weight
{
	for(int i=w; i>=b; i--)
		setmax(f[i], f[i - b] + a);
}

int main()
{
	scanf("%d%d", &n, &w);
	while(n--)
	{
		int a, b, c;
		scanf("%d%d%d", &a, &b, &c);
		for(int i=0; (1<<i)<=c; i++)
			add(a << i, b << i), c -= 1 << i;
		if(c) add(a * c, b * c);
	}
	printf("%d\n", f[w]);
	return 0;
}

混合背包

没错,就是前三种放在一起的背包。不用的物品有不同的种类。比如洛谷 P1833 樱花,就是混合背包。不过,也不要慌,直接用个分支判断,比如:

for (循环物品种类) {
  if (是 0 - 1 背包)
    套用 0 - 1 背包代码;
  else if (是完全背包)
    套用完全背包代码;
  else if (是多重背包)
    套用多重背包代码;
}

实际上也不一定要这样,可以全部统一成混合背包:

  • 对于01背包,可选数目ki=1k_i=1
  • 对于完全背包,可选数目ki=Wwik_i=\lceil\frac W{w_i}\rceil

这里就不给出详细代码,有兴趣的读者可以自己尝试一下。

总结

让我们来总结一下三种基本背包DP的异同:

项目 01背包 完全背包 多重背包
适用场景 每件物品只能选择一次 每件物品可以无限选择 每件物品可以选择的次数有限
状态转移方程[1] max(fj,fjwi+vi)\max(f_j,f_{j-w_i}+v_i) max(fj,fjwi+vi)\max(f_j,f_{j-w_i}+v_i) 基本同01背包
时间复杂度[2] O(nW)\mathcal O(nW) O(nW)\mathcal O(nW) O(Wlogki)\mathcal O(W\sum\log k_i)
空间复杂度[3] O(W)\mathcal O(W) O(W)\mathcal O(W) O(W)\mathcal O(W)
编码难度

创作不易,如果觉得好就请给个三连,谢谢支持!


  1. 压缩掉第一维fjf_j,01背包为倒序枚举jj,完全背包为正序 ↩︎

  2. 完全背包为优化后的复杂度,多重背包为二进制优化的复杂度。 ↩︎

  3. 指压缩第一维后的dp数组大小。 ↩︎