给定整数 与目标值 子集和问题 (subset sum problem) 要求寻找指标集

或者判定这样的 是否存在。它是 Karp 列出的经典 NP 完全问题之一,因此我们并不期待量子计算把任意实例变成多项式时间——本词条也不会给出这样的结论。本词条研究的是一个更细、也更有实际意义的问题:对一类”随机困难实例”,目前已知的经典指数时间算法的底数大约是多少,量子算法又能把底数压到多少?具体地说,经典启发式算法(Becker–Coron–Joux)把底数降到约 ,而 Bernstein、Jeffery、Lange、Meurer 的量子算法在同一类启发式假设下达到

其中 表示忽略 的多项式因子(这是指数时间算法文献的标准记号,因为底数才是竞争的主战场)。

值得强调的是,这个加速不是”对一切子集做 Grover”能得到的。正如我们将看到的,朴素 Grover 给出的 甚至追不上 1974 年的经典折半搜索。真正的答案是把四种成分组合起来:多重表示 (multiple representations)模约束筛选 (modular filtering)Johnson 图上的量子行走、以及可相干更新的数据结构。本词条的目标是把这四种成分逐一讲清楚,并完整复现 这个指数的平衡计算。

前置知识:读者应已完成的 Grover 算法振幅放大,并对量子行走碰撞/元素不同性搜索有基本了解。本词条不会重新推导这些工具,但会在用到时指出每一步引用了哪个结论。

1. 问题背景:密度、困难实例与历史

1.1 密度与”困难背包”

子集和实例的难易程度用一个无量纲参数刻画。设所有 都是约 比特的整数(即 ),定义实例的密度 (density)

直觉如下:所有子集和的取值落在区间 内,该区间的长度约为 ;而子集共有 个。由抽屉原理,一个”典型”目标值 的期望解数约为

  • (即 ,数字比个数”长”)时,,上面的估计失效;实际上此时子集和撞在同一个值上的机会很多,解通常很多,随机找一个解反而容易。
  • (即 )时,期望解数指数级小:随机取的 多半无解,而一旦承诺有解,解往往唯一。

密度接近 的实例处在两种 regime 的交界处:解的数量是常数级的(不多不少),任何”碰运气”的策略都没有可乘之机。这正是公认的最困难区域,也是密码学与指数算法文献重点研究的对象。本词条涉及的困难随机实例就是指: 取为约 比特的整数(即 ),并承诺至少存在一个解(典型地,解的数量为常数级,目标解的权重 接近 ——这是随机解的最大似然权重,因为 是所有 中最大的)。

1.2 为什么这个问题重要

  • 理论地位:子集和是 NP 完全问题中最”干净”的一个——输入只有一行整数。它是检验”量子计算对 NP 完全问题到底能加速多少”这一问题的试金石:目前的证据都指向”最多加速指数底数,而不能去除指数”。
  • 密码学动机:早期的背包公钥密码体制(Merkle–Hellman 等)直接建立在子集和的困难性之上;虽然那些具体体制已被攻破,“随机背包有多难”至今仍是衡量格密码与编码类密码安全余量的参照系之一。
  • 算法史:子集和是指数时间精确算法发展的一条主线。本词条涉及的里程碑有:
    • 穷举搜索: 同样表示忽略多项式因子);
    • Horowitz–Sahni 折半搜索(1974):时间与空间
    • Schroeppel–Shamir(1981):时间仍为 ,但空间降到 ——它提示我们内存往往是这类算法的真正瓶颈;
    • Howgrave-Graham–Joux(2010)提出 representation technique(多重表示技术),把随机困难实例的启发式时间指数降到明显低于折半的
    • Becker–Coron–Joux(2011)用更精细的重叠表示把经典启发式指数降到约
    • Bernstein–Jeffery–Lange–Meurer(2013)把多重表示与量子行走结合,给出启发式 ,这正是本词条的主线(对应文末 Zoo 编号 178)。

1.3 本词条路线图

我们将按指数从大到小的顺序,依次讲透四个层次:

  1. 为什么朴素 Grover 的 没有超过经典折半(第 2 节);
  2. 量子不平衡折半如何把指数降到 (第 3 节);
  3. Johnson 图量子行走如何独立地达到同一个 ,以及它引入的数据结构问题(第 4 节);
  4. 多重表示 + 16 叶量子行走如何把指数进一步压到 ,以及这个结论附带哪些”启发式与模型依赖”的保留条款(第 5–7 节)。

2. 经典基线:穷举、折半与朴素 Grover 的失败

2.1 穷举与折半搜索

穷举所有 个子集需要 次求和,这是底数 的起点。

折半搜索 (meet-in-the-middle) 把指标集任意分成大小各 的左右两半 表示无交并)。对任意子集 ,记 ,则

也就是说: 是解,当且仅当”左半部分的子集和”与” 减去右半部分的子集和”在数值上相等。这提示我们构造两张表

然后在两张表之间寻找碰撞 (collision)——即同时出现在 中的数值。每张表有 项。具体的实现是:生成两张表( 次求和),把 排序( 次比较),再对 的每一项在 中做二分查找( 次查找、每次 )。总时间与总空间都是

相对穷举,底数从 降到了 。注意这个算法的本质是用空间换时间:两张表各占 个存储单元,这正是 Schroeppel–Shamir 后来专门优化内存的原因。第 8 节会给出一个可以手工执行的小例子。

2.2 为什么朴素 Grover 追不上经典

学完 Grover 算法后的第一反应是:把 个子集看作搜索空间,用预言机标记”和等于 “的子集,迭代 次,得到时间

但这与 Horowitz–Sahni 的经典折半完全相同,而经典算法早在 1974 年就有了。换句话说:Grover 提供的平方根加速,恰好等于”把问题分成两半再用平方倍的存储”这一经典技巧的收益,两者撞在同一条指数曲线上。要想真正超过经典,必须找到一种”经典算法已经榨干了平方根、但量子还能再榨一次”的结构。下面两节给出两条这样的路线。

3. 量子路线一:不平衡折半搜索

3.1 关键观察:折半的”一半”与 Grover 的”平方根”不能叠加在表小的一侧

折半搜索中,左右两半各贡献 的表。如果直接对”右半表中的匹配项”做 Grover,搜索空间是 ,开平方得 ——看似巨大改进,但左半表本身要花 的时间建立,总时间仍是 。表太大,把 Grover 的收益吃掉了。

出路是不对称:让需要显式建表的一侧小一些,让只做相干搜索的一侧大一些,使”建表成本”与”搜索成本”在指数上相等。

3.2 参数化与平衡推导

引入参数 :取前 个元素为”左半”(显式建表),剩下 个元素为”右半”(相干搜索)。

  • 建表成本:左半有 个子集,枚举其和并排序,成本为 。排序后的表支持 时间的成员查询——暂不计模型问题(见 3.3 与第 7 节)。
  • 搜索成本:对右半的 个子集做 Grover 搜索,标记条件是” 减去该子集的和,出现在左半表中”。搜索空间大小为 ,解的数量为常数级(密度 1 的困难实例,见 1.1),故 Grover 迭代次数为

每次迭代的预言机查询是一次对左半表的成员判定,多项式开销被吸收进

总成本为两项之和:

渐近意义下,和式由指数较大的一项主导,所以要最小化的是

第一项随 递增,第二项随 递减;一个递增函数与一个递减函数的最大值,在两者相等时取到最小(若 比交点小,则第二项更大且随 减小而减小,说明还能改进;对称地, 比交点大时第一项主导且仍可减小)。令

代回即得建表成本与搜索成本同为 ,因此总时间与总内存为

具体写出来:预计算前 个元素的 个和并排序;再对余下 个元素的 个子集做 Grover,搜索域大小的平方根是 ,恰好与表的大小相等。这就是”不平衡”二字的由来:经典折半的最优划分是 ,而”建表 + Grover”的最优划分是

3.3 一个埋下的伏笔

上面的分析把”对排序表的成员查询”计为多项式开销。在经典 RAM 里这毫无问题;但在量子线路里,Grover 迭代的每一步都要对**叠加态中的地址**做查询,即需要相干地实现

也就是一个量子随机访问存储 (QRAM) 操作。对大小为 的表,这是否真的只需 个基本门,是一个很强的模型假设。这个伏笔将在第 4 节的数据结构讨论和第 7 节的保留条款中反复出现,请务必带着它往下读。

4. 量子路线二:Johnson 图量子行走

不平衡折半给出的 还可以从另一条看似完全不同的路线得到:把折半的碰撞寻找问题直接翻译成碰撞搜索,用 Johnson 图上的量子行走求解。这条路线本身指数相同,但它引入的”行走 + 数据结构”框架正是通往 的必经之路。

4.1 从折半到碰撞问题

回到第 2 节的两张表:左半表 与右半表 各有 项,算法要找一个数值同时出现在两表中。抽象地说:候选全集大小为 ,其中存在一个(或极少数)目标配对——左表中的某个和与右表中的某个和相等——我们要把这一对找出来。

4.2 Johnson 图与行走状态

Johnson 图 (Johnson graph) 的定义:顶点是一个 元全集的所有 元子集,两个顶点相邻当且仅当它们恰相差一个元素(即把一个元素换成另一个元素)。量子行走的状态对应”当前持有 个候选及其和”,一步行走对应”替换其中一个候选”。

称一个顶点是标记的 (marked),如果它持有的 个候选中同时包含目标配对的两个元素——此时通过检查手中的数据就能发现碰撞(见 4.5)。

标记顶点占比:随机一个 元子集同时包含两个指定元素的概率为

最后一步用到了 (下文将看到 ),因此 。注意 平方关系:因为需要”两个都中”。

谱隙:Johnson 图 上简单随机行走的谱隙为

(这是 Johnson 图的标准谱性质;直观地说,一步只换掉 个元素中的一个,因此需要 步才能让状态”忘记”初始持有的元素,混合时间就是 量级,谱隙是其倒数)。

4.3 Szegedy/Ambainis 搜索的代价公式

量子行走搜索(Szegedy 框架,以及 Ambainis 为元素不同性问题发展的版本,Zoo 编号 7)告诉我们:在”谱隙 、标记占比 “的图上检测一个标记顶点,所需的行走步数尺度为

外加一次性设置成本 (setup cost)——把初始的 个候选装入数据结构,需要 次查询。若每步行走的更新成本 (update cost) 与每次的检查成本 (checking cost) 都是 次查询(这一点要靠 4.5 的数据结构保证),总查询复杂度

其中代入 后,根号内的 因子相约:,开方得 ,取倒数即

4.4 参数平衡: 的来源

最小化 。两项分别是增函数与减函数,最优点在两项同阶处(也可以严格求导: 给出 ,与下同阶)。令

代回:两项均为 。由

即总查询复杂度 ——与不平衡折半殊途同归。

4.5 数据结构:查询复杂度不等于时间

这次平衡与矩阵乘积验证中的情形非常相似,但有一个本质区别必须讲透:上面的计数是查询复杂度,它假设”替换一个候选、查询其和、检查手中是否出现碰撞”都只要 。要把它变成真实的时间复杂度,行走状态必须由真正的数据结构承载,且该结构要在相干叠加下支持四种操作:

  1. 成员查询(某个和是否已在手中);
  2. 插入一个新候选;
  3. 删除一个旧候选;
  4. 回答”当前手中是否已出现目标碰撞”。

为什么朴素方案不行?若用排序数组存储 个候选,一次插入/删除要移动 个表项,更新成本从 变成 ;总时间变成 ,即 ,代入 ——比穷举还差。门时间会彻底毁掉查询优势。

Bernstein 等人的解法是使用带子树计数的可逆 radix tree:把候选按其和的二进制前缀组织成检索树,每个内部节点记录子树中的元素个数。成员查询、插入、删除都只需沿树走 层,而”子树计数”使碰撞标志(例如两个指定数值是否同时出现)可以在插入/删除时沿路径增量维护。所有操作都可以做成可逆线路,每次更新的开销为 ,从而

但请注意代价:这隐含假设了对一个大小为 的指数级数据结构可以做相干(叠加地址)读写,且每次访问只计 。这就是 3.3 埋下的伏笔在行走框架中的再现——一个 QRAM 风格的强模型假设,第 7 节会正式把它列为保留条款。

5. 多重表示:为什么指数还能继续降

前两节的 有一个令人不安的事实:它高于最佳经典启发式指数 (Becker–Coron–Joux)。也就是说,仅把”折半 + 碰撞”量子化,反而不如最好的经典算法。要真正领先,必须把经典算法领先的原因——多重表示——也搬进量子行走。

5.1 一个解有许多张”彩票”

设目标解 的权重为 (见 1.1,这是随机解的典型权重)。把它拆成两个无交的半解

这样的有序拆分有多少种?答案是从 个元素中选出 个给

其中指数由二元熵公式给出(推导见第 6.1 节的同款计算):。也就是说,同一个解有指数多种表示。每一种表示都是一张独立的”彩票”:只要算法碰巧重构出其中任何一种拆分,就恢复了整个解。

5.2 模约束:让列表保持苗条的筛子

多重表示本身不直接省时间——表示虽多,每种表示的候选空间也大。Howgrave-Graham–Joux 的 representation technique 的关键是把”多表示”与”随机模约束”配对使用。以第一层为例:不直接要求

是子集和的简记),而是先只施加一个较弱的同余条件

其中 是一个精心选取的模数。效果是一个筛子:随机一对候选的和在模 下近似均匀分布,所以只有约 比例的候选对能通过这层约束——中间列表的长度被压缩到”候选数乘积再除以 “。通过约束的对再往上合并,施加更高层的模 条件,直到最后一层才检查精确的整数等式。

于是形成一场精妙的拉锯:模筛选 的比例淘汰候选,让每个中间列表保持较小;而多重表示提供 张彩票,提高”至少一种拆分恰好通过所有随机约束”的概率。只要每层模数取得与列表大小相协调,就能做到”列表不爆炸、彩票不浪费”。这就是 Howgrave-Graham–Joux 的 representation technique 的核心思想。

5.3 更深的树与历史

把上述二分递归下去: 各自再二分,层层施加模约束,最终形成 个大小约 叶块 (leaf blocks)(配合 Becker–Coron–Joux 式的重叠表示,叶块之间允许共享元素,因此叶块总大小可以超过解的支集本身——这正是”重叠”二字的含义,也是表示数进一步增大的来源)。

  • Howgrave-Graham–Joux(2010)首次系统使用这一技术,把随机困难背包的启发式指数降到明显低于折半的
  • Becker–Coron–Joux(2011,Zoo 编号 404)通过更精细的重叠表示把经典启发式指数降到约

5.4 量子化不是”对经典程序整体做 Grover”

一个自然的想法是:BCJ 程序内部是一系列列表构造,能不能直接把它当作经典子程序、外层套一个 Grover?答案是否定的,原因有二。其一,BCJ 程序的运行时间已经是 ,把它作为黑盒做振幅放大只会得到 次”调用”、但每次调用本身仍是 ——平方根作用在错误的对象上(何况该程序内部还有不可逆的列表排序与碰撞筛选,不能直接相干化)。其二,真正的收益在于更细的操作:把 16 个叶列表本身放进量子行走的状态,让”替换一个叶元素”只触发上层碰撞列表的局部更新——这正是第 4 节”行走 + 可增量维护的数据结构”框架的用武之地。下一节给出完整的平衡计算。

6. 16 叶量子行走与 指数的平衡

6.1 单个叶块的候选空间

每个叶块从约 个可用位置中选取 个元素(“约 个可用位置”来自重叠表示的随机化分解:每个叶块可以在整个支集池中取样,见 5.3)。因此一个叶块的完整候选数为

用 Stirling 公式把它化成指数形式。回忆 ,对 逐项展开:

其中

是二元熵函数。取 (故 ):

数值计算(本词条把每一步都算出来):

两者相加得 ,再乘

6.2 行走状态与设置成本

量子行走在 Johnson 图式的产品空间上进行,状态持有 8 个叶列表,每个列表保留 个随机抽出的叶块候选(论文的具体构造把 16 叶分解树的最底一层合并进列表元素与预处理;对复杂度分析而言,关键数字只有两个——单个叶列表的候选空间 ,以及需要同时命中的列表个数 8)。除叶列表外,状态还携带由分解树内部节点与模约束层派生出的 21 个碰撞列表(具体层次安排见原文);由于列表总数是常数,建立全部 8 个叶列表及其 21 个派生列表的设置成本为

借助第 4.5 节的可逆 radix tree,一次行走步(替换某个叶列表中的一个元素、并沿分解树增量更新受影响的派生列表)只需 开销。

6.3 标记占比与行走步数

一个顶点(即一组 8 个叶列表的当前内容)是标记的,当且仅当它能拼出完整的目标解。固定目标解后,它在每个叶列表中对应一个指定的叶块;8 个叶列表各自独立地以约 的概率抽中自己的指定叶块,故 8 个指定叶块同时被抽中的概率约为

行走的谱隙仍为 Johnson 图的 (一步只替换一个叶元素)。套用第 4.3 节的步数公式:

恢复一个完整解(用振幅放大把标记概率从 提升到常数)所需的行走步数即为此量级。注意这个表达式里两个因子的来源泾渭分明: 来自谱隙(状态混合的代价), 来自 (八重巧合的代价)。

6.4 最终平衡

总成本为设置成本与行走成本之和:

令两项同阶(增项与降项的最优平衡,与 3.2、4.4 同理):

代入

因此 16 叶量子行走的启发式渐近成本为

量子比特操作。作为对照:经典最佳启发式为 (Becker–Coron–Joux),本算法在同一类假设下把底数从 降到

7. 为什么必须写上”启发式与模型依赖”

这个指数不是对任意输入成立的最坏情况定理。把结论引用出去之前,必须连同以下保留条款一起引用:

  1. 随机实例假设:分析针对密度约 1 的随机实例( 为约 比特随机整数,见 1.1),并假设目标解数量适中(常数级)。对刻意构造的对抗性实例,列表大小与碰撞数的估计都可能失效。
  2. 均匀性启发式:模 等约束把候选筛掉约 的比例,这依赖于”子集和在模 下近似均匀分布”的假设;同样地,分析假设各列表中的碰撞行为接近独立。这些都是启发式而非已证明的引理。
  3. 多项式截断:单个叶元素的替换会影响上层派生列表的大小,分析假设可以把这种影响截断在多项式范围内而不显著改变成功概率。
  4. QRAM 风格成本模型:论文把”对指数级大数据结构做量子叠加地址访问”计为每次 开销(即 3.3 与 4.5 讨论的相干 radix tree)。在只允许最近邻基本门的容错量子计算模型中,这一假设可能引入额外因子。

因此准确的表述是:在随机密度 1 实例与 QRAM 风格成本模型下,该组合算法的启发式时间指数约为 它既不证明 (甚至不暗示这一点——它只覆盖一类随机实例),也不保证现实的容错量子计算机在具体 上优于高度优化的经典实现。它与 Grover 对对称密码的加速属于同一类型:指数底数的缩小,而非问题难度类别的改变。

8. 小例子:手工执行折半与多重表示

8.1 折半搜索的完整手算

取实例 ,目标 。把指标分成左半 (元素 )与右半 (元素 )。

第一步,枚举左半的全部子集和( 项):

(已排序)。

第二步,枚举右半的全部子集和,并用 去减:

第三步,找碰撞:逐一检查 中的值是否出现在 中。 不在, 不在, 不在。唯一的碰撞值是

第四步,恢复解:左半中和为 的子集是 (即元素 );右半中需要 ,对应的子集是 (即元素 )。合并得 ,验证 。由于碰撞唯一,解也唯一。

8.2 多重表示的手算

,设目标解为 (权重 )。把它有序拆成两个大小为 的无交块,方式数为

现在施加一个模约束,例如要求 为某个预定余数)。对随机数据,每张”彩票”通过约束的概率约为 ;单买一张彩票只有 的中奖率,而 6 张彩票同时买,“至少一张通过”的机会明显增大——尽管这些彩票共享元素、并不独立,精确概率无法简单相乘,这正是第 7 节”启发式”三个字的具体含义。当 增大时,彩票数 指数增长,而每层模约束只筛掉一个常数比例(),拉锯的结果就是第 5–6 节的指数下降。

大型算法仍在寻找 8.1 中那种数值碰撞,只是用模条件提前筛选、用 8.2 中的多重表示提高命中概率,并把整个搜索放进量子行走的状态里。

9. 小结与习题

小结

  • 对全部 个子集直接做 Grover 得到 ,并没有胜过 1974 年的经典折半搜索;要超过经典,必须利用”建表成本”与”搜索成本”之间的不平衡。
  • 量子不平衡折半( 划分)把指数降到 ;Johnson 图量子行走通过”设置成本 对搜索步数 “的平衡独立得到同一指数,但要求可相干更新的数据结构(可逆 radix tree),隐含 QRAM 风格假设。
  • 多重表示让同一个解拥有指数多种拆分;配合模约束筛选控制列表大小,是经典算法降到 (Becker–Coron–Joux)的原因。
  • 把 16 叶表示树装进量子行走状态,令”8 个叶列表同时命中”的概率 与谱隙 相平衡,得到启发式指数 ;该结论依赖随机实例、均匀性启发式与相干内存模型,不蕴含

习题

  1. (概念)解释为什么”对整个 搜索空间做 Grover”不能超越经典折半搜索。分别写出穷举、折半、朴素 Grover、量子不平衡折半四种方法的时间与空间复杂度(用 )。
  2. (计算)补全 4.2 的标记占比推导:验证 ,并说明当 时为什么可以用 近似。
  3. (计算)模仿 6.1,用 Stirling 公式证明 (这就是 5.1 中”一个解有 种二分表示”的依据),并把 的数值验证到小数点后三位。
  4. (推导)在 6.3–6.4 中,从 出发,完整重推行走步数 与平衡点 ;然后回答:如果表示树只有 4 个叶列表(),平衡指数会变成多少?由此说明”叶数越多越好”的直觉在哪里开始失效(提示:考虑叶块候选空间 随叶数的变化)。
  5. (手算)对实例 、目标 完整执行折半搜索:列出两张表、找出所有碰撞并恢复所有解。(应能找到两个解。)
  6. (讨论)列举”查询复杂度模型”与”完整容错门/内存模型”之间至少三项不同的成本来源,并讨论:其中哪一项对 这一结果的现实意义影响最大?为什么?

参考文献


参考资料