《一种测量和校正虚拟现实显示器畸变的装置和方法.pdf》由会员分享,可在线阅读,更多相关《一种测量和校正虚拟现实显示器畸变的装置和方法.pdf(12页完整版)》请在专利查询网上搜索。
1、(10)申请公布号 CN 103792674 A (43)申请公布日 2014.05.14 CN 103792674 A (21)申请号 201410028245.5 (22)申请日 2014.01.21 G02B 27/64(2006.01) (71)申请人 浙江大学 地址 310027 浙江省杭州市西湖区浙大路 38 号 (72)发明人 郑臻荣 李安 夏新星 吴懿思 陈驰 申俊飞 张雅琴 刘旭 李海峰 (74)专利代理机构 杭州天勤知识产权代理有限 公司 33224 代理人 胡红娟 (54) 发明名称 一种测量和校正虚拟现实显示器畸变的装置 和方法 (57) 摘要 本发明公开了一种测量和校。
2、正虚拟现实显示 器畸变的方法, 包括以下步骤 : 分划板经光学系 统对分划板成像得到畸变网格像 ; 根据网格顶点 坐标与畸变网格顶点坐标之间的对应关系, 计算 得到每个网格的畸变系数 ; 在畸变网格像上划出 无畸变的网格 A, 根据光路可逆原理, 光学系统的 物面上具有与网格A相对应的畸变网格A, 然后 利用畸变系数与网格 A 的顶点坐标, 计算出畸变 网格 A的顶点坐标, 并将畸变网格 A的顶点坐 标生成坐标查找表 ; 利用坐标查找表将待投影图 像转换为预畸变图像, 并输入像源, 并对像源所显 示的预畸变图像成像, 得到成像图像, 对比成像图 像与所述的预畸变图像, 调整像源, 完成对像源的。
3、 校正。本发明还公开了一种测量和校正虚拟现实 显示器畸变的装置。 (51)Int.Cl. 权利要求书 2 页 说明书 5 页 附图 4 页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书2页 说明书5页 附图4页 (10)申请公布号 CN 103792674 A CN 103792674 A 1/2 页 2 1. 一种测量和校正虚拟现实显示器畸变的方法, 其特征在于, 包括以下步骤 : 1) 设定带有网格的分划板, 将该分划板置于光学系统的物面, 并经过光学系统对分划 板成像得到畸变网格像, 所述畸变网格像上具有畸变网格 ; 2) 根据网格顶点坐标与畸变网格顶点坐标之间。
4、的对应关系, 计算得到每个网格的畸变 系数 ; 3) 在所述畸变网格像上划出无畸变的网格 A, 根据光路可逆原理, 光学系统的物面上具 有与网格 A 相对应的畸变网格 A, 然后利用畸变系数与网格 A 的顶点坐标, 计算出畸变网 格 A的顶点坐标, 并将畸变网格 A的顶点坐标生成坐标查找表 ; 4) 利用坐标查找表将待投影图像转换为预畸变图像, 并输入像源, 并对像源所显示的 预畸变图像成像, 得到成像图像, 对比成像图像与所述的预畸变图像, 调整像源, 完成对像 源的校正 ; 5) 将校正后的像源置于光学系统的物面, 并向像源输入预畸变图像, 经光学系统出射 为无畸变的图像, 完成对虚拟现实。
5、显示器的校正。 2. 如权利要求 1 所述的测量和校正虚拟现实显示器畸变的方法, 其特征在于, 在步骤 2) 中, 设网格的四个顶点坐标为 (x0,y0), (x1,y1), (x2,y2) 和 (x3,y3), 畸变网格的四个顶点 坐标为 (u0,v0), (u1,v1), (u2,v2) 和 (u3,v3), 建立顶点坐标 (x,y) 与 (u,v) 之间的对应关系 式 : 令则 其中, KX和 KY为畸变系数, 分别表示为 3. 如权利要求 2 所述的测量和校正虚拟现实显示器畸变的方法, 其特征在于, 在步骤 3) 中, 设无畸变的网格 A 的顶点坐标为 (un,vn), 根据光路的可逆。
6、性原理, 得到 : 其中, (xn,yn) 畸变网格 A的顶点坐标。 4. 一种测量和校正虚拟现实显示器畸变的装置, 所述的虚拟现实显示器包括光学系统 和像源, 其特征在于, 所述的装置包括光学系统畸变测量模块和预畸变图像生成模块 ; 所述的系统畸变测量模块用于测量光学系统的畸变系数 ; 所述的预畸变图像生成模块根据所述的畸变系数将待投影图像转换为预畸变图像 ; 权 利 要 求 书 CN 103792674 A 2 2/2 页 3 所述的系统畸变测量模块包括 : 分划板, 位于光学系统的物面位置, 且带有无畸变网格 ; 成像装置, 用于采集无畸变网格经光学系统所成的像, 得到畸变网格像 ; 图。
7、像处理模块, 根据畸变网格像中的畸变网格顶点坐标与无畸变网格顶点坐标之间的 对应关系, 得到畸变系数, 并生成坐标查找表 ; 预畸变图像生成模块包括 : 控制系统, 根据所述的坐标查找表, 将待投影图像转换为预畸变图像, 视频信号发生器, 用于将所述的预畸变图像送入像源显示。 5. 如权利要求 4 所述的测量和校正虚拟现实显示器畸变的装置, 其特征在于, 成像装 置包括相机镜头和 CCD 传感器。 6. 如权利要求 4 所述的测量和校正虚拟现实显示器畸变的装置, 其特征在于, 还包括 位于所述光学系统物面位置, 用于对所述分划板均匀照明的背光源。 7. 如权利要求 6 所述的测量和校正虚拟现实。
8、显示器畸变的装置, 其特征在于, 所述的 控制系统分别与背光源、 图像处理模块和视频信号发生器连接, 该控制系统还用于控制背 光源。 权 利 要 求 书 CN 103792674 A 3 1/5 页 4 一种测量和校正虚拟现实显示器畸变的装置和方法 技术领域 0001 本发明涉及投影光学系统领域, 具体涉及一种测量和校正虚拟显示显示器畸变的 装置和方法。 背景技术 0002 虚拟现实显示器不同于一般的投影机, 是一种可以将文字、 图像等信息由光学系 统直接投影在人眼成像的设备, 投射的文字和图像调整在无穷远平面上, 比如平视显示器 (HUD) 和头盔显示器 (HMD) , 能够将外界的景象与显。
9、示器的资料融合在一起, 使人们不需要 低头就能够方便、 舒适地看到他需要的重要资讯。 0003 虚拟现实显示器最初应用于军用飞机, 目前涉及的应用范围广泛, 具备智能操作 系统的虚拟现实显示器 (HWD) 开始商业化, 比如谷歌眼镜 ; 许多民用航空飞机上已经配备 了平视显示器 (HUD) , 同时, 装配在汽车、 火车或者地铁列车上可以更加方便地给驾驶员提 供路况、 导航等信息, 避免注意力中断以及丧失对状态意识的掌握, 提高驾驶的安全性。 0004 但是, 为了能使显示的信息不丢失, 同时还要使观察者得到舒适的观感, 在设计虚 拟现实显示器的光学系统时必须满足高清晰度和大视场的要求, 这会。
10、使得投影图像发生畸 变, 清晰度越高, 视场越大, 图像的畸变也越大, 尤其是在边缘视场。 一般的光学系统往往采 用同轴的设计, 此时图像的畸变是关于中心对称的, 但是在一些特殊的装配环境下, 虚拟现 实显示器的光学系统必须采用离轴设计的形式, 这会使得投影图像发生非常大的畸变, 且 畸变是不对称的。投影图像的畸变不仅会影响观察的舒适感, 甚至会造成观察者对重要信 息的误判, 导致不必要的损失。 因此, 如何消除虚拟现实显示器投影图像的畸变是亟待解决 的。 发明内容 0005 本发明提供了一种测量和校正虚拟现实显示器畸变的方法和装置, 在虚拟现实显 示器像源上对图像做预先的畸变处理, 来抵消光。
11、学系统所带来的畸变, 达到校正投影图像 畸变的目的。 0006 一种测量和校正虚拟现实显示器畸变的方法, 包括以下步骤 : 0007 1) 设定带有网格的分划板, 将该分划板置于光学系统的物面, 并经过光学系统对 分划板成像得到畸变网格像, 所述畸变网格像上具有畸变网格 ; 0008 2) 根据网格顶点坐标与畸变网格顶点坐标之间的对应关系, 计算得到每个网格的 畸变系数 ; 0009 3) 在所述畸变网格像上划出无畸变的网格 A, 根据光路可逆原理, 光学系统的物面 上具有与网格 A 相对应的畸变网格 A, 然后利用畸变系数与网格 A 的顶点坐标, 计算出畸 变网格 A的顶点坐标, 并将畸变网。
12、格 A的顶点坐标生成坐标查找表 ; 0010 4) 利用坐标查找表将待投影图像转换为预畸变图像, 并输入像源, 并对像源所显 示的预畸变图像成像, 得到成像图像, 对比成像图像与所述的预畸变图像, 调整像源, 完成 说 明 书 CN 103792674 A 4 2/5 页 5 对像源的校正 ; 0011 5) 将校正后的像源置于光学系统的物面, 并向像源输入预畸变图像, 经光学系统 出射为无畸变的图像, 完成对虚拟现实显示器的校正。 0012 在步骤 2) 中, 设网格的四个顶点坐标为 (x0,y0), (x1,y1), (x2,y2) 和 (x3,y3), 畸变 网格的四个顶点坐标为 (u0。
13、,v0), (u1,v1), (u2,v2) 和 (u3,v3), 建立顶点坐标 (x,y) 与 (u,v) 之间的对应关系式 : 0013 0014 令则 0015 其中, KX和 KY为畸变系数, 分别表示为 0016 在步骤3) 中, 设无畸变的网格A的顶点坐标为(un,vn), 根据光路的可逆性原理, 得到 : 0017 0018 其中, (xn,yn) 畸变网格 A的顶点坐标。 0019 本发明还提供了一种测量和校正虚拟现实显示器畸变的装置, 所述的虚拟现实显 示器包括光学系统和像源, 所述的装置包括光学系统畸变测量模块和预畸变图像生成模 块 ; 0020 所述的系统畸变测量模块用于。
14、测量光学系统的畸变系数 ; 0021 所述的预畸变图像生成模块根据所述的畸变系数将待投影图像转换为预畸变图 像 ; 0022 其中, 所述的系统畸变测量模块包括 : 0023 分划板, 位于光学系统的物面位置, 且带有无畸变网格 ; 0024 成像装置, 用于采集无畸变网格经光学系统所成的像, 得到畸变网格像 ; 0025 图像处理模块, 根据畸变网格像中的畸变网格顶点坐标与无畸变网格顶点坐标之 间的对应关系, 得到畸变系数, 并生成坐标查找表 ; 0026 预畸变图像生成模块包括 : 0027 控制系统, 根据所述的坐标查找表, 将待投影图像转换为预畸变图像, 0028 视频信号发生器, 用。
15、于将所述的预畸变图像送入像源显示。 0029 优选的, 成像装置包括相机镜头和 CCD 传感器。 说 明 书 CN 103792674 A 5 3/5 页 6 0030 在本发明的装置中, 还包括位于所述光学系统物面位置, 用于对所述分划板均匀 照明的背光源。 0031 所述的控制系统分别与背光源、 图像处理模块和视频信号发生器连接, 该控制系 统还用于控制背光源。 0032 本发明具有结构简单、 快速校正和使用便捷的优点 ; 根据系统要求可以实现不同 精度的校正 ; 另外, 由于是通过对图像源做预先的畸变处理来抵消光学系统的畸变, 属于电 校正, 所以光学系统在设计时可以尽量满足视场和清晰度。
16、等设计指标, 而不需要考虑畸变 的影响, 这给设计者带来极大的方便, 使其具有广泛的应用前景。 附图说明 0033 图 1 是本发明具体实施的系统流程图。 0034 图 2 是本发明实施过程中畸变测量装置示意图。 0035 图 3 是本发明无畸变的网格分划板示意图 0036 图 4 是本发明涉及畸变和预畸变算法的示意图。 0037 图 5 是本发明校正像源畸变的装置示意图。 0038 图 6 是本发明校正后投影设备的示意图。 0039 图中 : 1 为背光源、 2 为分划板、 3 为相机镜头、 4 为 CCD 传感器、 5、 6 为数据处理模 块、 7 为控制系统、 8 为像源、 9 为视频信。
17、号发生器、 10 为光学系统。 具体实施方式 0040 为使本发明的结构、 特征及优点更加清晰明了, 现结合附图对整套装置和方法作 进一步详细说明, 但不应理解为对本发明保护范围的任务限定。 0041 如图 1 所示, 系统流程分为三个部分, 第一部分, 是光学系统畸变测量和预畸变图 像查找表生成 ; 第二部分, 是像源畸变校正 ; 第三部分, 是经过校正后的投影设备。 0042 图 2 为图 1 系统流程中第一部分的装置示意图。将带有无畸变网格的分划板 2 置 于光学系统 10 物面位置, 分划板 2 的形状如图 3 所示, 由若干个网格组成, 系统要求的校正 精度越高, 相同面积上分划的网。
18、格数越多, 反之亦然。 0043 分划板 2 经过光学系统 10 和相机镜头 3 在 CCD 传感器 4 上成像, 所成像为带有畸 变的网格图像, 畸变的产生是由光学系统 10 造成的, 相机镜头 3 采用超低畸变的工业相机 镜头, 所以相机镜头带来的畸变忽略不计。CCD 传感器 4 将采集的图像送入图像处理模块 5, 经过图像的增强, 提取畸变网格图像各个网格顶点坐标并保存。然后将得到的坐标值送 入数据处理模块 6, 计算光学系统的畸变系数和预畸变图像的查找表。 0044 结合图 4 来说明计算光学系统的畸变系数和预畸变图像的查找表的过程。取分划 板区域中第 i 行, 第 j 列的一个网格,。
19、 如图 4 左侧的实线网格所示, 该网格经过光学系统后 在像面产生畸变, 如图 4 右侧的实线网格所示, (xn,yn) 和 (un,vn) 分别为网格上四个顶点的 坐标 (n=0, 1, 2, 3) 。 说 明 书 CN 103792674 A 6 4/5 页 7 0045 令 0046 (x0,y0), (x1,y1), (x2,y2) 和 (x3,y3) 四 点 为 顶 点 的 四 边 形 区 域 S 与 (u0,v0), (u1,v1), (u2,v2) 和 (u3,v3) 四点为顶点的四边形区域 S 间存在一个函数关系 f 满足 : 0047 0048 这样我们认为四边形区域 S 内。
20、的任意点经过函数 f 映射之后得到其在四边形区 域 S 内对应点。 0049 下面我们选取比较简单的函数关系 f 进行详细说明。令 0050 0051 满足以下关系 : 0052 0053 其中, KX和 KY为系统的畸变系数, 分别表示为 0054 可以求出光学系统的畸变系数 KX和 KY, 用同样的方法分别算出所有网格对应的畸 变系数, 将得到的畸变系数返回给控制系统 7 并保存。 0055 下一步, 在畸变网格像的区域内划分若干无畸变的网格, 网格的个数根据像源 8 的分辨率决定。假设其中一个无畸变网格位于某一畸变网格内, 如图 4 右侧所示虚线, 按照 光路可逆的原理, 该无畸变网格在。
21、光学系统的物面对应一个畸变网格, 如图 4 左侧虚线网 格所示, (xn,yn) 和 (un,vn) 分别为网格上四个顶点的坐标 (n=0, 1, 2, 3) 。 0056 由前述的光学系统畸变参数 KX和 KY以及无畸变网格的顶点坐 (un,vn), 根据光 路的可逆性原理, 可推出 : 0057 0058 用同样的方法, 把所有像面上无畸变的网格点在物面上的对应坐标全部算出, 将 得到的坐标值返回给控制系统 7, 整理后保存为坐标查找表。 0059 图 5 为系统流程图 1 中校正像源畸变的装置示意图。控制系统 7 按坐标查找表将 说 明 书 CN 103792674 A 7 5/5 页 。
22、8 无畸变图像变换为预畸变图像, 并输入像源 8 显示, 经过预畸变的图像能够抵消光学系统 的畸变, 实现畸变校正。但是, 由于像源控制电路的设计缺陷或者其他因素的干扰, 会造成 像源显示的图像和输入像源的图像不一致, 即像源不能精确地显示原始的图像信息, 因此 要校正像源的畸变。 0060 如图5所示, 控制系统7按坐标查找表将无畸变的图像变换为预畸变图像, 并输入 像源 8 显示, 像源显示的预畸变图像经过相机镜头 3, 在 CCD 传感器 4 上成像, CCD 传感器将 采集的图像送入图像处理模块 5, 对比输入像源的预畸变图像和像源上显示的预畸变图像, 调整像源, 直到像源显示的预畸变。
23、图像与输入像源的预畸变图像一致 (两者相差在精度要 求范围内) , 则完成像源畸变的校正。 0061 如图 6 所示为校正后的投影系统示意图, 将校正后的像源 8 置于光学系统 10 的物 面, 控制系统 7 按坐标查找表将无畸变的图像变换为预畸变图像, 并输入像源显示, 由于图 像是预先经过畸变的处理, 所以预畸变图像在经过光学系统 10 成像时将光学系统带来了 的畸变抵消, 则最终所成像为无畸变的图像。 0062 由上述原理可知, 光学系统畸变的测量和像源畸变的校正只需在系统装配前校正 一次, 校正后, 控制系统只需按预畸变图像查找表生成预畸变图像输入像源即可, 则经光学 系统投影后为无畸。
24、变的图像 0063 基于以上原理的投影系统畸变测量和校正装置, 具有结构简单, 快速校正, 使用便 捷等优点 ; 根据系统要求可以实现不同精度的校正 ; 另外, 由于是通过对图像源做预先的 畸变处理来抵消光学系统的畸变, 属于电校正, 所以光学系统在设计时可以尽量满足视场 和清晰度等设计指标, 而不需要考虑畸变的影响, 这给设计者带来极大的方便, 使其具有广 泛的应用前景。 说 明 书 CN 103792674 A 8 1/4 页 9 图 1 说 明 书 附 图 CN 103792674 A 9 2/4 页 10 图 2 图 3 说 明 书 附 图 CN 103792674 A 10 3/4 页 11 图 4 图 5 说 明 书 附 图 CN 103792674 A 11 4/4 页 12 图 6 说 明 书 附 图 CN 103792674 A 12 。