图像降噪是图像处理领域中非常传统和经典的问题,今天给大家推荐学习该领域值得读的文章。
作者&编辑 | 言有三
1 基本CNN结构
图像去噪模型的输出是无噪声的图像,与输入图像大小相同,所以可以使用图像分割一类的模型,即经典的基于跳层连接的卷积与反卷积对称结构[1],优化目标为逐个像素的欧式距离损失。
文章引用量:200+
推荐指数:✦✦✦✦✧
[1] Mao X, Shen C, Yang Y B. Image restoration using very deep convolutionalencoder-decoder networks with symmetric skip connections[C]//Advances in neuralinformation processing systems. : 2802-2810.
2 残差学习DnCNN
在信息处理领域中,学习信号的改变量往往比学习原始信号更加简单,这被用于非常有效的残差网络。DnCNN模型[2]也借鉴了这个思路,它不是直接输出去噪图像,而是预测残差图像,即噪声观察和潜在的干净图像之间的差异。
文章引用量:1600+
推荐指数:✦✦✦✦✦
[2] Zhang K, Zuo W, Chen Y, et al. Beyond a gaussian denoiser: Residual learningof deep cnn for image denoising[J]. IEEE Transactions on Image Processing, ,26(7): 3142-3155.
3 噪声水平估计CBDNet
前述两个框架都是盲去噪声模型,即不估计噪声的水平,而CBDNet 模型[3]是一个真实图像非盲去噪框架,使用了一个噪声估计子网络估计出噪声水平,然后与原输入图一起输入基于跳层连接的去噪模型。
文章引用量:50+
推荐指数:✦✦✦✦✧
[3] Guo S, Yan Z, Zhang K, et al. Toward convolutional blind denoising of realphotographs[C]//Proceedings of the IEEE Conference on Computer Vision andPattern Recognition. : 1712-1722.
4 GAN合成噪声样本
对于有监督的模型来说,真实的有噪声和无噪声成对图像的获取是将深度学习应用于去噪问题的关键,但是仿真数据集不够真实,因此基于生成对抗网络GAN生成真实噪声[4]是非常好的方式,值得重点关注。
文章引用量:80+
推荐指数:✦✦✦✦✦
[4] Chen J, Chen J, Chao H, et al. Image blind denoising with generative adversarial network based noise modeling[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. : 3155-3164.
5 自监督模型
获取带噪声图片和清晰图片的成本非常高昂,那么是不是可以只使用含噪声的图像就训练出好的去噪模型呢?Noise2Noise[5]就是这样一个框架,使用同一个场景的多张含噪声图像就能获得好的结果。类似的还有基于单张图进行学习的Deep image prior,Noise2Void等,它们的原理都是基于统计先验知识
文章引用量:400+
推荐指数:✦✦✦✦✦
[5] Lehtinen J, Munkberg J, Hasselgren J, et al. Noise2noise: Learning image restoration without clean data[J]. arXiv preprint arXiv:1803.04189, .
[6] Lempitsky V, Vedaldi A, Ulyanov D, et al. Deep Image Prior[C]. computer vision and pattern recognition, : 9446-9454.
[7] Krull A, Buchholz T, Jug F, et al. Noise2Void - Learning Denoising From Single Noisy Images[C]. computer vision and pattern recognition, : 2129-2137.
[8] Batson J, Royer L. Noise2Self: Blind Denoising by Self-Supervision[J]. arXiv: Computer Vision and Pattern Recognition, .
6 图像降噪的应用
当然了,图像降噪这个问题我们不能仅仅局限在一些很底层和传统的噪声理解,它本身可以覆盖更多的应用,比如在计算机视觉领域中研究比较多的去雨算法,在相关研究中会使用到特定的模型以及注意力机制等方法,感兴趣的可以去关注
文章引用量:20+
推荐指数:✦✦✦✦✧
[9] Li S, Cao X, Araujo I B, et al. Single Image Deraining: A Comprehensive Benchmark Analysis[C]. computer vision and pattern recognition, : 3838-3847.