具身智能新手名词表English

去噪扩散隐式模型

Denoising Diffusion Implicit ModelDDIM进阶

沿用 DDPM 的训练方式、把采样改成可跳步的确定性过程的扩散加速方法。

去噪扩散隐式模型由斯坦福的 Jiaming Song、Chenlin Meng、Stefano Ermon 于 2020 年提出,发表于 ICLR 2021。DDPM(去噪扩散概率模型)生成一个样本要沿马尔可夫链走几百上千步去噪,很慢。DDIM 构造了一类非马尔可夫的扩散过程,训练目标和 DDPM 相同,所以训好的 DDPM 不用重训就能换成 DDIM 采样:可以跳步,只走十几到几十步,论文报告墙钟时间快 10–50 倍;把随机项设为零时采样是确定性的,同一个初始噪声总得到同一结果。它是后来各类快速扩散采样器的起点,扩散策略在真机上做实时控制也常靠它减少步数。

例子扩散策略(Diffusion Policy)的真机实验用 100 步训练、DDIM 10 步推理,在 RTX 3080 上单次推理延迟约 0.1 秒。

也叫
DDIM 采样器
相关
去噪扩散概率模型、扩散模型、去噪步数、扩散 / 流采样器(ODE / SDE 求解器)、扩散策略、噪声调度
来源
Denoising Diffusion Implicit Models (arXiv:2010.02502)
Diffusion Policy: Visuomotor Policy Learning via Action Diffusion (arXiv HTML)

在完整名词表里查看 →