Diffusion 不仅可以更好地模仿,而且可以进行「创作」。
分散模型(Diffusion Model)是图象生成模型的一种。有别于此前 AI 领域大名鼎鼎的 GAN、VAE 等算法,分散模型另辟蹊径,其主要思维是一种先对图象增加噪声,再逐步去噪的过程,其中如何去噪还原图象是算法的核心部分。而它的最终算法能够从一张随机的噪声图象中生成图象。
近年来,生成式 AI 的惊人增长为文本到图象生成、视频生成领域等许多令人兴奋的应用提供了支持。这些生成工具背后的基本原理是分散的概念,这是一种特殊的采样机制,克服了以前的方法中被认为难以解决的一些缺点。
最近,来自普渡大学的 Stanley H. Chan 发布了一份分散模型的教程《Tutorial on Diffusion Models for Imaging and Vision》,对该方向技术进行了直观详尽的解释。
本教程的目标是讨论分散模型的基本思维,目标受众包括对分散模型钻研,或应用这些模型正在解决其他问题的本科生和钻研生。
文章链接:https://arxiv.org/abs/2403.18103
该教程包括四个部分,涵盖了最近钻研文献中支持分散生成模型的一些基本概念:变分自编码器(VAE)、DDPM(Denoising Diffusion Probabilistic Models)、SMLD(Score Matching with Langevin Dynamics)和 SDE,从多个角度独立导出了相同的分散思维,共长 50 页。
作者介绍
这篇教程的作者是美国普渡大学电气与计算机工程学院和统计学系 Elmore 副教授 Stanley H. Chan。
Stanley Chan 2007 年在香港大学得到学士学位,2009 年、2011 年分别在加州大学圣地亚哥分校得到数学硕士学位和电气工程博士学位。2012 年至 2014 年在哈佛大学约翰・A・保尔森工程与应用科学学院担任博士后钻研员。2014 年加入普渡大学。
Stanley Chan 主要从事计算成像钻研。他的钻研任务是通过共同设计传感器和算法来构建智能相机,以实现在所有成像条件下的可视性。
Stanley Chan 还多次得到论文奖项,包括 2022 年 IEEE 信号处理学会(SPS)最好论文奖、2016 年 IEEE 国际图象处理会议(ICIP)最好论文奖等等。
参考链接:
https://engineering.purdue.edu/ChanGroup/stanleychan.html