阅读论文"Conditional Sequential Modulation for Efficient Global Image Retouching"

   2020 ECCV,出发点是图像retouch的操作是一系列的全局操作,可以被一个多层感知机表示,而对于一个特定的图像,其retouch时的操作和其语义信息有关,因此需要一个调制网络进行参数image specific的调整。MLP和调制模式如下所示:

D63ELT.png

在实际实现时,这里的多层感知机使用1x1卷积进行替代。进行特征调制时,这里仅对特征进行放缩及加上偏置系数,这些系数通过调制模块得到,整体结构如下所示:

D68QAg.png

通过全局调整的好处是不改变图像内容且实现全局变换。此外,通过在调制模块对另一个风格的target进行finetune,也可以实现连续风格调整,和AdaIN类似。论文实验的效果是可以又快又好,和3D LUT等全局增强思路都差不多,不过全局增强这条路差不多也快做到头了,如何和局部增强结合,达到更加通用且快速的增强,是可以思考的一个点。

0%