• [论文阅读] 颜色迁移-Automated Colour Grading


    [论文阅读] 颜色迁移-Automated Colour Grading

    文章: Automated colour grading using colour distribution transfer, [paper], [matlab代码], [python代码]

    1-算法原理

    本文算法分为2个大步骤, 首先使用IDT(Iterative Distribution Transfer)方法得到初步的结果, 这个结果里面可能会将噪声放大了, 因而第二大步是进行后处理, 减少伪影, 保留原图的梯度.

    具体地:

    1. IDT方法, 得到初始结果, 详细原理可以查看本文描述, 也可以查看作者的另外一篇文章 N-Dimensional Probability Density Function Transfer and its Application to Colour Transfer, 或者也可以查看这篇博客 [论文阅读] 颜色迁移-N维pdf迁移
    2. 后处理, 减少伪影, 保留原图的梯度, 如下所示, 本文使用优化方法, J J J为最后需要得到的图像, I I I为原图, t ( I ) t(I) t(I)为第一步IDT结果, ∇ \nabla 表示梯度计算, ϕ \phi ϕ ψ \psi ψ 分别为权重系数
      优化公式

    上述公式中, 第一部分用来保留梯度, 如果仅有这部分, 最后的结果就是原图, 第二部分用来保证与目标图像颜色接近.

    2-算法核心

    第一部分这里不再说明, 详见 [论文阅读] 颜色迁移-N维pdf迁移.

    对于第二部分, 文中进行了简单化调整, 过程如下, 这里直接复制文中的说明, 数学不好就不做解释了
    简化过程
    公式局部可能写错了, 根据作者提供的代码实现进行调整并简化, 保持公式与代码实现保持一致, 方便理解, 如下所示:

    I 0 = I ( x , y ) I 1 = I ( x , y − 1 ) I 2 = I ( x , y + 1 ) I 3 = I ( x − 1 , y ) I 4 = I ( x + 1 , y ) J 0 = J ( x , y ) J 1 = J ( x , y − 1 ) J 2 = J ( x , y + 1 ) J 3 = J ( x − 1 , y ) J 4 = J ( x + 1 , y ) I0=I(x,y)I1=I(x,y1)I2=I(x,y+1)I3=I(x1,y)I4=I(x+1,y)J0=J(x,y)J1=J(x,y1)J2=J(x,y+1)J3=J(x1,y)J4=J(x+1,y) I0=I(x,y)I1=I(x,y1)I2=I(x,y+1)I3=I(x1,y)I4=I(x+1,y)J0=J(x,y)J1=J(x,y1)J2=J(x,y+1)J3=J(x1,y)J4=J(x+1,y)

    公式中a6可能存在问题, 这个根据代码实现简化后的公式:

    a 1 ( x , y ) = − ψ ( x , y − 1 ) + ψ ( x , y ) 2 a 2 ( x , y ) = − ψ ( x , y + 1 ) + ψ ( x , y ) 2 a 3 ( x , y ) = − ψ ( x − 1 , y ) + ψ ( x , y ) 2 a 4 ( x , y ) = − ψ ( x + 1 , y ) + ψ ( x , y ) 2 a 5 ( x , y ) = ϕ ( x , y ) − a 1 ( x , y ) − a 2 ( x , y ) − a 3 ( x , y ) − a 4 ( x , y ) a 6 ( x , y ) = ϕ ( x , y ) I 0 + a 1 ( x , y ) ( I 1 − I 0 ) + a 2 ( x , y ) ( I 2 − I 0 ) + a 3 ( x , y ) ( I 3 − I 0 ) + a 4 ( x , y ) ( I 4 − I 0 ) a1(x,y)=ψ(x,y1)+ψ(x,y)2a2(x,y)=ψ(x,y+1)+ψ(x,y)2a3(x,y)=ψ(x1,y)+ψ(x,y)2a4(x,y)=ψ(x+1,y)+ψ(x,y)2a5(x,y)=ϕ(x,y)a1(x,y)a2(x,y)a3(x,y)a4(x,y)a6(x,y)=ϕ(x,y)I0+a1(x,y)(I1I0)+a2(x,y)(I2I0)+a3(x,y)(I3I0)+a4(x,y)(I4I0) a1(x,y)=a2(x,y)=a3(x,y)=a4(x,y)=a5(x,y)=a6(x,y)=2ψ(x,y1)+ψ(x,y)2ψ(x,y+1)+ψ(x,y)2ψ(x1,y)+ψ(x,y)2ψ(x+1,y)+ψ(x,y)ϕ(x,y)a1(x,y)a2(x,y)a3(x,y)a4(x,y)ϕ(x,y)I0+a1(x,y)(I1I0)+a2(x,y)(I2I0)+a3(x,y)(I3I0)+a4(x,y)(I4I0)

    公式19简化为:

    a 1 ( x , y ) J 1 + a 2 ( x , y ) J 2 + a 3 ( x , y ) J 3 + a 4 ( x , y ) J 4 + a 5 ( x , y ) J 0 = a 6 ( x , y ) (19) a1(x,y)J1+a2(x,y)J2+a3(x,y)J3+a4(x,y)J4+a5(x,y)J0=a6(x,y) \tag{19} a1(x,y)J1+a2(x,y)J2+a3(x,y)J3+a4(x,y)J4+a5(x,y)J0=a6(x,y)(19)

    将J0单独放到方程的一边, 可以得到:

    a 5 ( x , y ) J 0 = ϕ ( x , y ) I 0 a 1 ( x , y ) ( I 1 − I 0 ) − a 1 ( x , y ) J 1 a 2 ( x , y ) ( I 2 − I 0 ) − a 2 ( x , y ) J 2 a 3 ( x , y ) ( I 3 − I 0 ) − a 3 ( x , y ) J 3 a 4 ( x , y ) ( I 4 − I 0 ) − a 4 ( x , y ) J 4 = ϕ ( x , y ) I 0 − A 1 − A 2 − A 3 − A 4 a5(x,y)J0=ϕ(x,y)I0a1(x,y)(I1I0)a1(x,y)J1a2(x,y)(I2I0)a2(x,y)J2a3(x,y)(I3I0)a3(x,y)J3a4(x,y)(I4I0)a4(x,y)J4=ϕ(x,y)I0A1A2A3A4 a5(x,y)J0=ϕ(x,y)I0a1(x,y)(I1I0)a1(x,y)J1a2(x,y)(I2I0)a2(x,y)J2a3(x,y)(I3I0)a3(x,y)J3a4(x,y)(I4I0)a4(x,y)J4=ϕ(x,y)I0A1A2A3A4

    A 1 = a 1 ( x , y ) ( J 1 − I 1 + I 0 ) A 2 = a 2 ( x , y ) ( J 2 − I 2 + I 0 ) A 3 = a 3 ( x , y ) ( J 3 − I 3 + I 0 ) A 4 = a 4 ( x , y ) ( J 4 − I 4 + I 0 ) A_1 = a_1(x, y)(J_1 - I_1 + I_0) \\ A_2 = a_2(x, y)(J_2 - I_2 + I_0) \\ A_3 = a_3(x, y)(J_3 - I_3 + I_0) \\ A_4 = a_4(x, y)(J_4 - I_4 + I_0) A1=a1(x,y)(J1I1+I0)A2=a2(x,y)(J2I2+I0)A3=a3(x,y)(J3I3+I0)A4=a4(x,y)(J4I4+I0)

    在公式2边除以a5, 可以得到公式20, 即为最后的图像

    J 0 = ϕ ( x , y ) I 0 − A 1 − A 2 − A 3 − A 4 a 5 ( x , y ) (20) J_0=\frac{\phi(x, y) I_0 - A_1- A_2 - A_3 - A_4}{a_5(x, y)} \tag{20} J0=a5(x,y)ϕ(x,y)I0A1A2A3A4(20)

    最后, 代码实现时, 对结果进行了加权, 即:

    J 0 k + 1 = ϕ ( x , y ) I 0 k − A 1 k − A 2 k − A 3 k − A 4 k a 5 ( x , y ) ∗ ( 1 − ρ ) + J 0 k ∗ ρ (20) J_0^{k+1}= \frac{\phi(x, y) I_0^{k} - A_1^{k}- A_2^{k} - A_3^{k} - A_4^{k}}{a_5(x, y)} * (1 - \rho) + J_0^{k} * \rho \tag{20} J0k+1=a5(x,y)ϕ(x,y)I0kA1kA2kA3kA4k(1ρ)+J0kρ(20)

    3-算法效果

    文中给出的算法结果如下:

    结果示例
    结果示例

  • 相关阅读:
    从html radio到android RadioButton
    数据结构链表之无头单向循环链表的实现
    水豚鼠标助手 强大的鼠标美化工具
    Java 中如何优雅的关闭进程&线程
    Vue-diff算法和双向数据绑定原理
    广州地铁14号线新市墟站开建,白云区居民即将开启双线换乘模式!
    代谢ADMET在线网页预测工具SwissADME 、SOMP 、BioTransformer
    AWS Systems Manager(SSM)
    Cpp浅析系列-STL之queue
    代码随想录-015-剑指Offer206. 反转链表
  • 原文地址:https://blog.csdn.net/j05073094/article/details/127706222