[Camera效果]MSM8909AWB算法流程.pdf

[Camera效果]MSM8909AWB算法流程 本⽂来 ⾃于我的前同事-⼩卢，⼀个很有个性，能⼒⼜不错的年 ⼩伙⼦ ！ (⽂章已经得他本⼈同意分享) MSM8909 AWB算法流程 本⽂介绍 MSM8909 AWB 的相关流程，在那之前，先了解 AWB 的相关概念 ⼀. 相关概念 1. ⾊温 ⾊温表⽰光线中包含颜⾊成分的⼀个计量单位。理论上讲，⾊温是将绝对⿊体从绝对零度开始升温后所呈现的颜⾊，计量单位为开尔⽂ (K)。绝对⿊体在受热后，颜⾊逐渐从⿊转红、转黄、转 ⽩、最后转蓝。如果某⼀种光源发出的光，与某以温度下⿊体发出的光所含光谱成 分相同，就将其称为某⾊温光。常见的标准⾊温等有 ： D65 ：国际标准⼈⼯ ⽇光，⾊温 = 6500K D75 ：模拟北⽅太阳光，⾊温 = 7500K D50 ：模拟太阳光，⾊温 = 5000K TL84 ：商场灯光，⾊温 = 4000K CWF ：商场冷 ⽩灯光，⾊温 = 4 100K A ：黄⾊展厅灯光，⾊温 = 2860K 2. ⽩平衡 由于光源经常性地会带着某种颜⾊的光谱，因此，当⽩⾊的物体呈现在此种光源下时，它就不再是⽩⾊了。如果没有 ⽩平衡，那么在黄光下 拍的图⽚ （如 A 光）就会偏黄，在 ⽇光下拍的图⽚就会偏蓝，等等。为了使所拍物体呈现真正的颜⾊，需要把光源本⾝的颜⾊消除掉，这 个操作就称之为 ⽩平衡。 ⼆. ⾼通 ⽩平衡流程 ⽩平衡的基本思路就是通过设定的统计区域统计出画⾯的光源分布情况，进⽽准确的判断出当前场景的⾊温，再根据⾊温选择对应 RGB 的 补偿系数，达到消除光源颜⾊的⽬的。 先整体了解 AWB 的处理流程 （mm-camera-CORE 为 3A 核⼼算法，具体代码实现⾼通不开放） 1、设置 AWB 相关参数 ⾸先从设置 awb 参数开始，awb 模块会收到 ae 传递的 exp_idx 等参数，⽤于区分室内室外 ；接着判断是否需要 lock awb，当⾛ awb 时，会开始进⾏ awb 处理 ； 2、 计算 rg，bg ⾼通以 rg 为横坐标，bg 为纵坐标，划分整个光源区域 算法会计算出画⾯中各个⽩点的落点区域，再根据参数中设定的权重，得出最终的 rg，bg 值 不同的算法，会得出不同的 rg，bg，例如简单灰度世界算法，决策树算法等等。⾼通 AWB 采⽤多种算法得出不同算法下的 rg，bg，最终根据效果参数中设定的权重值决定采⽤何种结果。 （顺带⼀提，算法⼀直在更新，主流的算法都是根据先验知识预测结果，当算法⼯程师提出某种应对特殊场景的算法机制时，就需要 tuning ⼯程师根据实际场景以及 side effect 决定是否使⽤） 从上⾯的 log 来看，已得多种 ⽩点的加权平均分布 weighted sample average，⼀般⽽⾔已经可以根据该分布直接得出 final decision， 但正如上所⾔，⾼通算法⼯程师考虑到某些特殊场景，于是在算法⾥加⼊了这些场景的检测机制，当触发这些检测机制时，会使得 weighted sample average ⽆效或占⽐极少 ； 例如 Green_Zone 机制 （⽤于⼤⾯积绿⾊草地的场景），dominant_white_in_history 机制 （该机制意义未明，触发后该机制算出 的 rg，bg 会占主导），如下 log： 虽然 weighted sample avg 已经推测出该光源为 TL84 （4000K），但由于阈值设置不合场景，算法错误地检测出该场景为 Green_Zone，错判光源为 D50 （5000K），最终使⽤了不合适的 r_gain，b_gain 如下 log，虽然 weighted sample avg 推测出光源为 TL84 （4000K），但由于触发 history dominant white decision，该机制 算出光源为 D75 （7500K），导致最终的 rg，bg D75 占主导，致使算法错判场景光源为 D65 （6500K） final-awb-decison 的推导可以说是 AWB 算法的核⼼，因为它决定了 ISP 使⽤多少 rgb gain 去抵消光源的影响 3、传递 AWB gain 算法得出 AWB gain 后，实际上 tuning 的⼯作已经完成 （tuning 需要确保针对场景的 AWB gain 是合适的），接下来只要将 awb_output 输⼊到 ISP，ISP 会做 AE、AWB