You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

diffusion models(扩散模型)能否用于图像去噪?相关实践问询

问题解答

扩散模型完全可以应用于图像去噪任务,甚至从原理层面说,去噪就是扩散模型原生自带的核心能力。
你已经了解扩散模型的训练核心是学习逆转渐进式加高斯噪声的过程:模型训练阶段本来就在反复学习「给定叠加了不同强度噪声的图像,预测其中混入的噪声分量,最终还原出干净原图」的映射,这个训练目标和图像去噪任务的需求完全对齐,不存在原理上的适配障碍。

已有研究与实践先例

不管是学界研究还是工业界落地,相关的案例已经非常成熟:

  • 学界层面,早在2020年DDPM(去噪扩散概率模型)正式提出时,就有研究者验证了模型的噪声预测能力可以直接迁移到图像去噪场景。后续针对真实场景非理想高斯噪声的适配工作很快铺开:不管是相机传感器产生的高感噪声、图片压缩产生的块效应噪声、低光环境下的泊松-高斯混合噪声,都只需要在对应噪声分布的数据集上做微调,就能取得优于传统去噪算法(比如BM3D)、早期CNN去噪模型的效果,尤其在高噪声强度、纹理细节丰富的场景下,扩散模型输出的结果伪影更少、纹理自然度优势明显。
  • 工业界落地已经非常普遍:现在主流手机影像管线里的夜景降噪、老照片修复功能,很多都已经接入了经过轻量化优化的扩散去噪模型;专业图像处理软件的AI降噪模块,近两年也基本都上线了扩散模型驱动的降噪选项,对高感光度拍摄的RAW格式照片的降噪提升非常显著;此外适配了时序信息的扩散去噪模型,也已经在视频修复、视频增强类工具中大规模使用。

实际使用提示:原生扩散模型做去噪的推理速度偏慢,目前落地的商用方案基本都做了模型蒸馏、采样步长剪枝、潜空间扩散(在压缩后的潜变量特征域完成去噪再解码回原图)等优化,才能达到近实时的使用要求。如果你的使用场景是特定垂直领域(比如医学影像、卫星遥感影像),这类场景的噪声分布和通用自然图像差异很大,最好用场景内的带噪-干净图像对做少量微调,效果会远好于直接套用通用预训练模型。

内容的提问来源于stack exchange,提问作者user2551700

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.09.01 22:33:24