点击上方“CVer”,选择加"星标"或“置顶”

重磅干货,第一时间送达1110359414553befc4b04c93a652e375.png

作者:木瓜子

https://zhuanlan.zhihu.com/p/103988862

本文已由原作者授权,不得擅自二次转载

这篇论文主要介绍两篇基于深度学习的低光照图像增强的文章。

Progressive Retinex: Mutually Reinforced Illumination-Noise Perception Network for Low Light Image Enhancement(ACMMM2019)

基于Retinex的低光照图像增强包含对比度增强和噪声抑制两个任务,并存在一定的耦合关系,若忽略两者之间的关系可能会导致过度/欠平滑的结果。为了解决这一问题,本文提出了一种改进的Retinex框架,其中,低光照图像的噪声和亮度以一种互相增强的方式感知,来实现基于retinex的图像增强。本文设计了两个“逐点式”(即1*1的滤波器)的卷积神经网络分别用于建模环境光和图像噪声的统计规律,并利用它们作为约束来处理共同学习的过程,两个模型渐进地处理直到获得稳定的结果。网络结果图如下:

f63dbd6f4200fc206311255bdc3c0983.png


用网络学习得到的关于照度和噪声的有代表性像素的结果如下:

ec4ea682188503ed1397b18a29203603.png


网络的训练采用MSEloss,要优化的目标函数分为两个子任务,对比度增强和噪声抑制,其表达式如下:

63ee02bfee9240f854a8825b459d8ec0.png


此外,本文还提出了一种构造数据集的方法,并模拟了与亮度有关的噪声分布,

f12aaba4586bc887e14c79f0b7e1ea61.png


部分实验结果如下:

f977d749a0bf7d048137893ce57365b6.png


但这种方法存在一个较大的局限性,由于只考虑像素空间的统计分布而忽略了结构性质,1*1的卷积核感受野比较小,导致卷积的时候没有邻域信息。

EEMEFN: Low-Light Image Enhancement via Edge-Enhanced Multi-Exposure Fusion Network (AAAI2020)

现有的低光照图像增强算法存在三个问题:①现有的方法往往很难从极度暗/亮的图像中复原细节信息;②由于没有正常曝光的图像信息,现有的模型中存在色彩畸变;③基于像素点的损失会带来模糊等。了解决上述问题,本文提出了一个双阶段的模型为边缘增强的多曝光图像融合。第一阶段的多曝光融合模块通过生成和融合不同光照条件下的多曝光图像,恢复出良好的曝光图像细节,降低噪声方差和颜色偏差。值得注意的是,这里的多曝光图像是由原图乘上对应的比例得到的。第二阶段的边缘增强模块通过融合低光照图像和边缘信息生成高质量的图像。其网络结构如下:

bec9735049eabfd4586016623258b80c.png


其中,融合模块如下:

117c845987708ba3df5c1de6bc48253c.png


给出部分其在SID数据集上的结果:

109f97f45101dd0143989436dd3530c2.png

---End---

想要了解最新最快最好的CV/DL/ML论文速递、优质开源项目、学习教程和实战训练等资料,欢迎加入CVer学术交流群。涉及图像分类、目标检测、图像分割、人脸检测&识别、目标跟踪、GANs、Re-ID、医学影像分析、姿态估计、OCR、SLAM、场景文字检测&识别、PyTorch和TensorFlow等方向。

af3d809048b137a0afa69b3b2156177b.png

▲扫码进群

3cef811bf8e94476e80947fedc938405.png

▲长按关注我们

麻烦给我一个在看!

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐