针对多镜头拍摄的白平衡调整方法.pdf

《针对多镜头拍摄的白平衡调整方法.pdf》由会员分享，可在线阅读，更多相关《针对多镜头拍摄的白平衡调整方法.pdf（11页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201910286335.7 (22)申请日 2019.04.10 (71)申请人 北京易诚高科科技发展有限公司 地址 100035 北京市丰台区星火路9号1幢 三层389室 （园区） (72)发明人 廖志梁陶亮王道宁张亚东 (51)Int.Cl. G06T 7/90(2017.01) G06T 7/80(2017.01) G06T 7/73(2017.01) G06T 5/40(2006.01) G06T 3/40(2006.01) G06F 17/16(2006.01) (5。

2、4)发明名称 一种针对多镜头拍摄的白平衡调整方法 (57)摘要 本发明公开了一种针对多镜头拍摄的白平 衡调整方法， 包括： 1、 对多相机拍照的重合区域 进行标定； 2、 对重合区域进行白平衡差异评估； 3、 基于白平衡差异相机进行相机间色偏调整。 其 基于重合区域的标定、 判定、 白平衡调整， 不需要 做基于全局图像的统计特征分析， 提高了分析效 率， 省去了不必要的调整环节， 保证了调整过程 的实时性与泛化能力， 同时， 调整过程中采用的 模型简单， 以自然过渡为主， 对实时处理以及嵌 入式处理都没有限制， 可实现性强， 满足了全景 图拼接、 多目视觉、 多焦距拍摄等多镜头拍摄过 程中拍摄。

3、图像的白平衡协调调整要求。 权利要求书3页 说明书7页 CN 110009701 A 2019.07.12 CN 110009701 A 1.一种针对多镜头拍摄的白平衡调整方法， 其特征在于， 具体步骤包括： 步骤1、 对多相机拍照的重合区域进行标定， 标定过程包括： 步骤1-1、 设有个相机， 每个相机的拍摄图像为， i为相机标号，； 步骤1-2、 以中图像信息熵最大的图像为基准图， 并以拍摄的相机为参考相机， r为相机标号，； 步骤1-3、 确定空间位置上与参考相机拍摄区域有重叠的相机， 并按照离参考相机空间 位置的远近对与参考相机拍摄区域有重叠的相机进行排序， 确定空间位置最接近参考相机。

4、 的相机及其拍摄的图像， k为相机标号，； 步骤1-4、 设与之间的重合区域的坐标集合， 分别为重合区域的高、 宽的最大值； 步骤1-5、 设图像在图像坐标系下的重合图像与图像的空间交集图像 ； 步骤1-6、 设图像在图像坐标系下的重合图像与图像的空间交集图像 ； 步骤1-7、 利用参考相机和上述过程确定的空间位置最接近参考相机的相机进行有规 律图像标志信息的实景拍摄， 提取拍摄图像的RTS不变特征， 包括SIFT、 HARRIS、 SURF或者 HOG特征， 利用提取到的特征来做特征匹配， 得到匹配的特征点位置描述， 根据匹配的特征 点位置描述估算、与； 步骤2、 对重合区域和进行白平衡差异。

5、评估， 评估过程包括： 将重合区域变换至Lab颜色空间， 假设的宽度与高度分别为、 ， 同时的 宽度与高度也分别为、 ， 其中， 表示在处a通道的值； 表示在处b通道的值； 表示在处a通道的值； 表示在处b通道的值； 计算与在a、 b通道的平均差值， 计算公式如下： ； 权利要求书 1/3 页 2 CN 110009701 A 2 ； 计算色调平均差值； 若， 为相机间色调敏感门限阈值， 相机间需进行白平衡调整， 进入 步骤3； 否则， 相机间不需进行白平衡调整， 返回步骤1-3中， 以上述过程确定的空间位置最接 近参考相机的相机为新的参考相机， 继续进行下一相邻相机间重合区域的评估， 直至所。

6、有 评估完成； 步骤3、 基于白平衡差异相机进行相机间色偏调整， 调整过程包括： 步骤3-1、 计算的R、 B与G通道的比值与， 同时， 计算的R、 B与G通道的比值 与： 步骤3-2、 设分别为与大小相等的三个矩阵； 对于与中重合区域相同位置的元素值为； 对于中 的其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到； 对于与中重合区域相同位置的元素值为； 对于 中其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到； 中的所有元素值为1； 步骤3-3、 设调整后图像在处R、 G、 B通道的灰度值分别是， 和， 计算方法为： 权利要求书 2/3 页 3 CN 110009701 A 。

7、3 步骤3-4、 以白平衡调整后的图作为新基准图， 将拍摄新基准图的相机作为新的参 考相机， 返回步骤1-3中， 继续进行下一相邻相机间重合区域的评估， 直至所有评估和调整 完成。 2.根据权利要求1所述的一种针对多镜头拍摄的白平衡调整方法， 其特征在于， 所述步 骤1-2中， 计算熵的方法为通过统计直方图计算有效灰度范围， 有效灰度范围越广， 图像信 息熵越大。 权利要求书 3/3 页 4 CN 110009701 A 4 一种针对多镜头拍摄的白平衡调整方法 技术领域 0001 本发明涉及一种调整方法， 特别涉及一种针对相机、 手机等多镜头拍摄时的白平 衡调整方法， 属于相机或手机图像质量评。

8、价领域。 0002 背景技术 0003 随着手机、 相机的普及， 多镜头成像功能开始被广泛使用。 多镜头成像过程主要包 括全景图拼接、 多目视觉、 多焦距拍摄等。 针对这种多镜头成像功能需要对多个拍照过程进 行白平衡统一调整， 以实现不同相机拍摄的图像白平衡状态保持一致。 0004 现阶段， 多镜头拍摄时白平衡调整方法包括： 1) 基于离线标定的方法 在拍摄前对所有相机都做一次基于标识物的白平衡调整， 通过调整后， 认为相机间不 存在白平衡不统一的问题， 即可进行多镜头拍摄。 0005 2) 同步自动白平衡方法 通过外部色彩传感器进行检测、 同步每个相机的白平衡数据， 提供公共白平衡结果给 图。

9、像信号处理流水线， 在使用公共白平衡结果执行白平衡和色彩校正之后， 通过组合每个 相机单元的帧而获得合并的帧。 如专利申请号： 201510970897.5， 专利名称： 用于同步自动 白平衡的多相机装置和方法。 0006 上述方式存在的问题： 1) 离线标定方法存在假设， 即相机的白平衡属性不会随着拍摄对象的变化而变化， 该 假设是不成立的， 对于拍摄物发生变化时， 不同相机呈现出的色彩敏感度不同， 因此可能会 出现白平衡没有适应特性， 泛化能力弱， 造成白平衡调整效果的不稳定。 0007 2) 用外部色彩传感器做白平衡评估和感知， 前提是要处理好传感器之间的同步 与属性差异， 毕竟相机也是。

10、一种传感器， 因此， 这种传感器要能感知真实色域， 即传感器与 色域信号相关， 但不能过度相关， 过度相关的结果跟相机呈现出的效果是一样的， 即可能会 随着拍摄场景变换而发生变化， 如此， 这种方式不属于方法的范畴， 应属于传感器设计或者 优化范畴。 0008 于是， 为使多镜头拍照时各角度相机白平衡状态保持一致， 设计一种全新的针对 多镜头拍摄的白平衡调整方法就成为本发明想要解决的问题。 0009 发明内容 0010 鉴于上述现有情况， 在多个拍摄相机相对位置固定的前提下， 本发明的目的是： 提 供一种在拍照时可对多个相机进行实时白平衡状态调整， 并给出每个相机最优白平衡调整 策略， 使多相。

11、机拍摄出的图像不会受到拍摄对象色调改变而发生变化， 最终实现不同相机 的白平衡状态保持一致。 说明书 1/7 页 5 CN 110009701 A 5 0011 本发明是通过以下技术方案来实现的： 一种针对多镜头拍摄的白平衡调整方法， 具体步骤包括： 步骤1、 对多相机拍照的重合区域进行标定， 标定过程包括： 步骤1-1、 设有个相机， 每个相机的拍摄图像为， i为相机标号，。 0012步骤1-2、 以中图像信息熵最大的图像为基准图， 并以拍摄的相机为参考 相机， r为相机标号，。 0013 步骤1-3、 确定空间位置上与参考相机拍摄区域有重叠的相机， 并按照离参考相机 空间位置的远近对与参考。

12、相机拍摄区域有重叠的相机进行排序， 确定空间位置最接近参考 相机的相机及其拍摄的图像， k为相机标号，。 0014步骤1-4、 设与之间的重合区域的坐标集合， ，分别为重合区域的高、 宽的最大值。 0015步骤1-5、 设图像在图像坐标系下的重合图像与图像的空间交集图 像。 0016步骤1-6、 设图像在图像坐标系下的重合图像与图像的空间交集图 像。 0017 步骤1-7、 利用参考相机和上述过程确定的空间位置最接近参考相机的相机进行 有规律图像标志信息的实景拍摄， 提取拍摄图像的RTS不变特征， 包括SIFT、 HARRIS、 SURF或 者HOG特征， 利用提取到的特征来做特征匹配， 得到。

13、匹配的特征点位置描述， 根据匹配的特 征点位置描述估算、与。 0018步骤2、 对重合区域和进行白平衡差异评估， 评估过程包括： 将重合区域变换至Lab颜色空间， 假设的宽度与高度分别为、 ， 同时的 宽度与高度也分别为、 ， 其中： 表示在处a通道的值； 表示在处b通道的值； 表示在处a通道的值； 表示在处b通道的值。 0019计算与在a、 b通道的平均差值， 计算公式如下： 说明书 2/7 页 6 CN 110009701 A 6 ； ； 计算色调平均差值。 0020若， 为相机间色调敏感门限阈值， 相机间需进行白平衡调整， 进入步骤3。 0021 否则， 相机间不需进行白平衡调整， 返回。

14、步骤1-3中， 以上述过程确定的空间位置 最接近参考相机的相机为新的参考相机， 继续进行下一相邻相机间重合区域的评估， 直至 所有评估完成。 0022 步骤3、 基于白平衡差异相机进行相机间色偏调整， 调整过程包括： 步骤3-1、 计算的R、 B与G通道的比值与， 同时， 计算的R、 B与G通道的比值 与。 0023步骤3-2、 设分别为与大小相等的三个矩阵。 0024对于与中重合区域相同位置的元素值为； 对于 中的其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到。 0025对于与中重合区域相同位置的元素值为； 对于 中其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到。 002。

15、6中的所有元素值为1。 0027步骤3-3、 设调整后图像在处R、 G、 B通道的灰度值分别是， 说明书 3/7 页 7 CN 110009701 A 7 和， 计算方法为： 步骤3-4、 以白平衡调整后的图作为新基准图， 将拍摄新基准图的相机作为新的参 考相机， 返回步骤1-3中， 继续进行下一相邻相机间重合区域的评估， 直至所有评估和调整 完成。 0028 所述步骤1-2中， 计算熵的方法为通过统计直方图计算有效灰度范围， 有效灰度范 围越广， 图像信息熵越大。 0029 本发明所述的一种针对多镜头拍摄的白平衡调整方法的有益效果包括： 1、 基于重合区域标定和判定， 然后调整白平衡， 不需。

16、要做基于全局图像的统计特征分 析， 提高了分析效率； 2、 利用Lab色域计算重合区域色调平均差值来判定是否需要做白平衡调整， 与现有方 法相比， 极大地省去了不必要的调整环节， 保证了调整过程的实时性与泛化能力； 3、 本方法与现有方法相比， 调整过程中采用的模型简单， 以自然过渡为主， 对实时处理 以及嵌入式处理都没有限制， 可实现性强。 0030 4、 对有规律图像标志信息的实景进行拍摄， 可以避免对固定样本图像拍摄带来的 不便， 方便实际评估和白平衡调整过程， 提高了拍摄图像的灵活性。 0031 5、 可适合全景图拼接、 多目视觉、 多焦距拍摄等多镜头拍摄过程中拍摄图像的白 平衡协调调。

17、整。 0032 具体实施方式 0033 本发明的中心是： 在多个拍摄相机相对位置固定的条件下， 在保证每个相机可以 实时调整白平衡的前提下， 通过本方法给出每个相机的最优白平衡实时调整策略， 使多相 机拍摄出的图像不会受到拍摄对象色调改变而发生变化， 进而实现拍摄到的每个图像色调 一致。 0034 本发明所述的一种针对多镜头拍摄的白平衡调整方法主要包括三个部分： 1、 对多 相机拍照的重合区域进行标定； 2、 对重合区域进行白平衡差异评估； 3、 基于白平衡差异相 机进行相机间色偏调整。 0035 下面以C个相机组成的多相机拍照过程为例， 对本发明所述的一种针对多镜头拍 摄的白平衡调整方法作进。

18、一步的详细描述， 具体方法包括： 步骤1、 对多相机拍照的重合区域进行标定， 标定过程包括： 步骤1-1、 设有个相机， 每个相机的拍摄图像为， i为相机标号，。 0036 在进行白平衡调整前， 需要先将C个相机的位置相对固定， 使相机间形成固定的位 说明书 4/7 页 8 CN 110009701 A 8 置和相邻关系， 为后续拍摄图像的位置判断和白平衡调整提供必要的物质条件。 本例中， 每 个相机的拍摄图像分别记为， 其中， i为相机的标号，。 0037步骤1-2、 以中图像信息熵最大的图像为基准图， 并以拍摄的相机为参考 相机， r为相机标号，。 其中， 计算熵的方法为通过统计直方图计算。

19、有效灰度范围， 有效灰度范围越广， 图像信息熵越大。 0038 步骤1-3、 确定空间位置上与参考相机拍摄区域有重叠的相机， 并按照离参考相机 空间位置的远近对与参考相机拍摄区域有重叠的相机进行排序， 确定空间位置最接近参考 相机的相机及其拍摄的图像， k为相机标号，。 0039 本步骤以参考相机为基础， 对与参考相机拍摄区域有重叠的相机进行远近空间位 置的排序， 从而确定出哪个相机离参考相机最近， 哪个相机与参考相机最远， 列出相应的排 列顺序， 为后续由近向远的拍摄图像比对和调整过程提供依据。 本例中， 被确定空间位置最 接近参考相机的相机标号为k， 其拍摄的图像为。 0040步骤1-4、。

20、 设与之间的重合区域的坐标集合， ，分别为重合区域的高、 宽的最大值。 0041步骤1-5、 设图像在图像坐标系下的重合图像与图像的空间交集图 像。 0042步骤1-6、 设图像在图像坐标系下的重合图像与图像的空间交集图 像。 0043 步骤1-7、 利用参考相机和上述过程确定的空间位置最接近参考相机的相机进行 有规律图像标志信息的实景拍摄， 提取拍摄图像的RTS不变特征， 包括SIFT、 HARRIS、 SURF或 者HOG特征， 利用提取到的特征来做特征匹配， 得到匹配的特征点位置描述， 根据匹配的特 征点位置描述估算、与。 0044 其中， 有规律图像标志信息包括建筑、 植物、 动物、 。

21、山川、 连续的图案、 几何图形等 等。 而对实景进行拍摄， 可以避免对固定样本图像拍摄带来的不便， 方便实际评估和白平衡 调整过程。 通过匹配特征点确定拍摄图像位置关系， 进而得出准确的重合区域图像位置描 述。 0045步骤2、 对重合区域和进行白平衡差异评估， 评估过程包括： 将重合区域变换至Lab颜色空间， 假设的宽度与高度分别为、 ， 同时， 的宽度与高度也分别为、 ， 其中， 表示在处a通道的值； 说明书 5/7 页 9 CN 110009701 A 9 表示在处b通道的值； 表示在处a通道的值； 表示在处b通道的值； 计算与在a、 b通道的平均差值， 计算公式如下： ； ； 计算色调。

22、平均差值； 若， 为相机间色调敏感门限阈值， 相机间需进行白平衡调整， 进入 步骤3； 否则， 相机间不需进行白平衡调整， 返回步骤1-3中， 以上述过程确定的空间位置最 接近参考相机的相机为新的参考相机， 继续进行下一相邻相机间重合区域的评估， 直至所 有评估完成。 0046 步骤3、 基于白平衡差异相机进行相机间色偏调整， 调整过程包括： 步骤3-1、 计算的R、 B与G通道的比值与， 同时， 计算的R、 B与G通道的比值 与： 步骤3-2、 设分别为与大小相等的三个矩阵。 0047对于与中重合区域相同位置的元素值为； 对于 中的其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到。 。

23、0048对于与中重合区域相同位置的元素值为； 对于 说明书 6/7 页 10 CN 110009701 A 10 中其它元素以重合区域的元素值为拟合目标， 通过曲面拟合得到。 0049中的所有元素值为1。 0050步骤3-3、 设调整后图像在处R、 G、 B通道的灰度值分别是， 和， 计算方法为： 步骤3-4、 以白平衡调整后的图作为新基准图， 将拍摄新基准图的相机作为新的参 考相机， 返回步骤1-3中， 继续进行下一相邻相机间重合区域的评估， 直至所有评估和调整 完成。 0051 至此， 位置固定的所有C个相机拍摄的图像在基于重合区域图像基础上的白平衡 调整过程完成， 其避免了基于全局图像的统计特征分析， 省去了不必要的调整环节， 保证了 调整过程的实时性与泛化能力。 说明书 7/7 页 11 CN 110009701 A 11 。