书签 分享 收藏 举报 版权申诉 / 11

基于双目视觉的土地面积快速检测方法及其检测装置.pdf

  • 上传人:r7
  • 文档编号:6261880
  • 上传时间:2019-05-27
  • 格式:PDF
  • 页数:11
  • 大小:642.78KB
  • 摘要
    申请专利号:

    CN201510672335.2

    申请日:

    2015.10.16

    公开号:

    CN105277144A

    公开日:

    2016.01.27

    当前法律状态:

    撤回

    有效性:

    无权

    法律详情:

    发明专利申请公布后的视为撤回IPC(主分类):G01B 11/28申请公布日:20160127|||实质审查的生效IPC(主分类):G01B 11/28申请日:20151016|||公开

    IPC分类号:

    G01B11/28

    主分类号:

    G01B11/28

    申请人:

    浙江工业大学

    发明人:

    杨海清; 郭更新

    地址:

    310014浙江省杭州市下城区朝晖六区潮王路18号

    优先权:

    专利代理机构:

    杭州天正专利事务所有限公司33201

    代理人:

    王兵; 黄美娟

    PDF完整版下载: PDF下载
    内容摘要

    本发明公开了一种基于双目立体视觉的土地面积快速检测方法及其检测装置,所述的方法包括如下步骤:采用土地面积测量装置,通过触动ARM11嵌入式处理平台的触发开关,利用双目摄像机采集场景的左视图和右视图;分别对所述的左视图和右视图进行图像预处理,所述的图像预处理包括用于去除噪声的平滑滤波和图像的灰度变换;分别对处理过的图像进行特征点的提取和匹配;对配准后的图像对通过坐标提取算法提取特征点的三维坐标;根据面积计算公式计算得到被采集场景的面积。本发明能够快速的实现对土地面积的准确测量,解决了二维图像计算不规则土地的面积这一难题,不仅为土地面积的快速测量提供了技术支持,而且还为道路铺设面积的费用估算提供了技术支持。

    权利要求书

    1.基于双目立体视觉的土地面积快速检测方法,其特征在于:
    所述的方法包括如下步骤:
    步骤S1,采用土地面积测量装置,通过触动ARM11嵌入式处理
    平台的触发开关,利用双目摄像机采集场景的左视图和右视图;
    步骤S2,分别对所述的左视图和右视图进行图像预处理,所述
    的图像预处理包括用于去除噪声的平滑滤波和图像的灰度变换;
    步骤S3,分别对处理过的图像进行特征点的提取和匹配;
    步骤S4,对配准后的图像对通过坐标提取算法提取特征点的三
    维坐标;
    步骤S5,根据面积计算公式计算得到被采集场景的面积;
    所述的步骤S4中,特征点的三维坐标由以下公式获得,包括图
    像像素系与世界坐标系之间的转换;
    T 1 D = T 1 - ( x l - x r ) D - f D = T 1 f x l - x r = T 1 f d ]]>
    Z c u v 1 = k u s u 0 0 k v v 0 0 0 1 R T X w Y w Z w 1 ]]>
    其中,d=xl-xr,为位视差;xl,xr为空间任意一点;l和r分别
    为left和right的缩写;f为焦距;D为深度值;T1为两个摄像机之间
    的距离;s为扭转因子;ku=f/dx;kv=f/dy,其中,ku,kv,s,u0,
    v0分别为相机内部结构参数矩阵;其中[uv1]T表示特征点在图像上
    的点的坐标,u,v分别代表像素值;R为正交单位转换矩阵;T为三
    维平移矢量,[RT]为相机的外参数矩阵;(Xw,Yw,Zw)为在世界坐标系
    空间任意点P的三维坐标,P分别为左右图像中的成像一个成像坐标;
    (Xc,Yc,Zc)为在相机坐标系空间任意点P的齐次坐标。
    2.如权利要求1所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S1中,采用两个CMOS摄像机组成
    的双目摄像机进行图像的数据采集;双目摄像机的标定采用ZZhang
    的平面模板两步法进行标定,求出相机的外在参数[RT]。
    3.如权利要求2所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S2中,图像的平滑滤波处理由如下
    公式得到:
    g [ i , j ] = f [ i , j ] h [ i , j ] = Σ k = - n n Σ l = - m m f [ i - k , j - 1 ] h [ k , l ] ]]>
    式中,[i,j]为图像中的任意一个像素;k,l=1,0,或则-1;m,
    n表示卷积模板的大小;f[i,j]为图像的离散输入;h[i,j]为脉冲响应
    函数的离散输入;为卷积运算符;g[i,j]为滤波后图像的离散输出。
    4.如权利要求3所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S3中用Harris检测方法和Canny边
    缘探测器来提取左、右图像的角点和边缘。
    5.如权利要求4所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S3中特征点的匹配采用已知极线几
    何的对应点匹配。
    6.如权利要求5所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S5中,将所匹配的边界的三维点云
    投影到一个平面上,各点相连接成一个不规则的n多边形,通过求多
    边形的面积来求其土地面积。
    7.如权利要求6所述的基于双目立体视觉的土地面积快速检测
    方法,其特征在于:所述的步骤S5中,利用梯形法求面积法求得n
    多边形的面积;
    其中,梯形法求面积公式为: S = | Σ i = 1 n 1 2 ( x i + 1 - x i ) ( y i + 1 - y i ) | ]]>
    其中,S为所求多边形的面积;(xi,yi)为变换后的一个顶点,而
    (xi+1,yi+1)为变换后紧挨着(xi,yi)顶点的下一个顶点坐标,以其中一个
    顶点为原点的坐标;xn+1=x1=0,yn+1=y1=0。
    8.一种专用于如权利要求1~7所述的基于双目视觉的土地面积
    快速检测方法的检测装置,其特征在于:包括两个CMOS摄像机、
    用于支撑CMOS摄像机的支撑架、图像采集处理装置模块、数据传
    输电缆、USB接口模块、ARM11嵌入式处理平台、供ARM11嵌入
    式处理平台用电的电源模块、LCD控制模块、LCD显示模块以及
    Flash&DRAM,所述的CMOS摄像机分别与图像采集处理装置模块、
    ARM11嵌入式处理平台连接,所述的图像采集处理装置模块分别与
    CMOS摄像机、ARM11嵌入式处理平台双向连接;所述的ARM11
    嵌入式处理平台分别与LCD控制模块、Flash&DRAM双向连接,所
    述的LCD控制模块与LCD显示模块连接。
    9.如权利要求8所述的检测装置,其特征在于:所述的两个
    CMOS摄像机由相同型号的工业数字摄像机组成;所述的CMOS摄
    像机与图像采集处理装模块之间的数据传输电缆长度在5m以内。
    10.如权利要求9所述的检测装置,其特征在于:所述的图像采
    集处理装模块与ARM11嵌入式处理平台之间通过5m以内的数据传
    输电缆连接或无线通信模块进行传输。

    说明书

    基于双目视觉的土地面积快速检测方法及其检测装置

    技术领域

    本发明涉及一种基于双目视觉的土地面积快速检测方法及其检
    测装置,特别涉及的是一种基于双目视觉的土地面积快速检测装置和
    方法。

    背景技术

    传统的土地面积测量方法包括罗盘仪测量法、测绳测量法、全站
    仪测量法、GPS卫星定位测量法,人工的方式进行用尺子进行测量,
    需要多人人配合,对资金资源的投入较大,在一些偏远地区,GPS的
    信号强度不够,无法达到测量要求。

    20世纪80年代美国MIT的Marr把视觉理论应用在双目匹配上,获
    得两张有视差的平面图的深度信息,由此为双目立体视觉的发展奠定
    了理论基础。双目立体视觉技术借鉴人通过双眼来感知立体空间的能
    力,经过双目图像采集、图像校正、立体匹配等步骤得到了视差图,
    根据映射关系找出双目图像中的同一场景并计算出场景的深度信息,
    进而获得改点的三维坐标。通过立体视觉技术进行物体识别与测距,
    信息量全面,且能获取场景三维深度信息等多种优势。因此能够快速、
    准确、简便的对规则的土地和不规则的土地的面积的获取,起着至关
    重要的作用。

    双目立体视觉目前已成为计算机视觉领域的一个重要的研究
    方向,其测量技术具有无损、非接触、精确、自动化程度高等优点,
    其在面积的测量方面已有应用,如工件的面积、叶片的面积等。

    土地面积特别是不规则的土地的面积在2D平面的测量仍是一
    个难以克服的难题。因此对于复杂的地形环境而言,要获得更为快捷
    精确的面积值,需在三维空间内对其进行建立形态模型,到目前为止
    仍是一个亟需解决的问题。

    发明内容

    为了克服现有不规则的土地的面积在2D平面的测量中存在的上
    述缺陷,本发明提供一种对复杂地形的面积做出快速的计算和测量,
    检测效率高、快捷、方便等优点的基于双目视觉的土地面积快速检测
    方法及其检测装置。

    本发明采用的技术方案是:

    基于双目立体视觉的土地面积快速检测方法,其特征在于:所述
    的方法包括如下步骤:

    步骤S1,采用土地面积测量装置,通过触动ARM11嵌入式处理
    平台的触发开关,利用双目摄像机采集场景的左视图和右视图;

    步骤S2,分别对所述的左视图和右视图进行图像预处理,所述
    的图像预处理包括用于去除噪声的平滑滤波和图像的灰度变换;

    步骤S3,分别对处理过的图像进行特征点的提取和匹配;

    步骤S4,对配准后的图像对通过坐标提取算法提取特征点的三
    维坐标;

    步骤S5,根据面积计算公式计算得到被采集场景的面积;

    所述的步骤S4中,特征点的三维坐标由以下公式获得,包括图
    像像素系与世界坐标系之间的转换;

    T 1 D = T 1 - ( x l - x r ) D - f D = T 1 f x l - x r = T 1 f d ]]>

    Z c u v 1 = k u s u 0 0 k v v 0 0 0 1 R T X w Y w Z w 1 ]]>

    其中,d=xl-xr,为位视差,xl,xr为空间任意一点;l和r分别
    为left和right的缩写;f为焦距;D为深度值;T1为两个摄像机之间
    的距离;s为扭转因子;ku=f/dx;kv=f/dy;ku,kv,s,u0,v0为
    相机内部结构参数矩阵;其中[uv1]T表示特征点在图像上的点的坐
    标,u,v分别代表像素值;R为正交单位转换矩阵;T为三维平移矢
    量,[RT]为相机的外参数矩阵;(Xw,Yw,Zw)为在世界坐标系空间任意
    点P的三维坐标,P分别为左右图像中的成像一个成像坐标;
    (Xc,Yc,Zc)为在相机坐标系空间任意点P的齐次坐标。

    所述的步骤S1中,采用两个CMOS摄像机组成的双目摄像机进
    行图像的数据采集;双目摄像机的标定采用ZZhang的平面模板两步
    法进行标定,求出相机的外在参数[RT]。

    所述的步骤S2中,图像的平滑滤波处理由如下公式得到:

    g [ i , j ] = f [ i , j ] h [ i , j ] = Σ k = - n n Σ l = - m m f [ i - k , j - l ] h [ k , l ] ]]>

    式中,[i,j]为图像中的任意一个像素;k,l=1,0,-1;m,n表
    示卷积模板的大小;f[i,j]为图像的离散输入、h[i,j]为脉冲响应函数
    的离散输入、为卷积运算符、g[i,j]为滤波后图像的离散输出。

    所述的步骤S3中用Harris检测方法和Canny边缘探测器来提取
    左、右图像的角点和边缘。

    所述的步骤S3中特征点的匹配采用已知极线几何的对应点匹
    配。

    所述的步骤S5中,将所匹配的边界的三维点云投影到一个平面
    上,各点相连接成一个不规则的n多边形,通过求多边形的面积来求
    其土地面积。

    所述的步骤S5中,利用梯形法求面积法求得n多边形的面积;

    其中,梯形法求面积公式为:

    其中,S为所求多边形的面积;(xi,yi)为变换后的一个顶点,而
    (xi+1,yi+1)为变换后紧挨着(xi,yi)顶点的下一个顶点坐标,以其中一个
    顶点为原点的坐标;xn+1=x1=0,yn+1=y1=0。

    一种专用于上述所述的基于双目视觉的土地面积快速检测方法
    的检测装置,包括两个CMOS摄像机、用于支撑CMOS摄像机的支
    撑架、图像采集处理装置模块、数据传输电缆、USB接口模块、ARM11
    嵌入式处理平台、供ARM11嵌入式处理平台用电的电源模块、LCD
    控制模块、LCD显示模块以及Flash&DRAM,所述的CMOS摄像机
    分别与图像采集处理装置模块、ARM11嵌入式处理平台连接,所述
    的图像采集处理装置模块分别与CMOS摄像机、ARM11嵌入式处理
    平台双向连接;所述的ARM11嵌入式处理平台分别与LCD控制模
    块、Flash&DRAM双向连接,所述的LCD控制模块与LCD显示模
    块连接。

    所述的两个CMOS摄像机由相同型号的工业数字摄像机组成;
    所述的CMOS摄像机与图像采集处理装模块之间的数据传输电缆长
    度在5m以内。

    所述的图像采集处理装模块与ARM11嵌入式处理平台之间通过
    5m以内的数据传输电缆连接或无线通信模块进行传输。

    本发明的有益效果体现在:通过本发明的测量装置和测量方法能
    够快速的实现对土地面积的准确测量,解决了二维图像计算不规则土
    地的面积这一难题,不仅为土地面积的快速测量提供了技术支持,而
    且还为道路铺设面积的费用估算、为工程建筑施工量的估算提供了技
    术支持。

    附图说明

    图1是本发明实施方式双目立体视觉测定三维坐标的原理图;

    图2是依据本发明实施方式的基于双目视觉的土地面积的快速
    检测方法图像处理流程图;

    图3是依据本发明实施方式双目立体视觉测量对应点的匹配过
    程图;

    图4是依据本发明实施方式的基于双目视觉的土地面积的快速
    检测装置的结构图。

    具体实施方式

    下面将依据附图和实施例,对本发明的具体实施方式作详细阐
    述。以下实施例由于阐述解释本发明,而不能理解为用来限制本发明
    的范围。

    本发明的基本原理为:基于双目立体视觉的土地面积的快速检
    测,利用的是左视图与右视图之间的视差关系,对获得的图像对进行
    平滑滤波去噪处理,对两幅图像进行特征点的搜寻,并对特征点进行
    立体匹配,根据公式计算出该点的三维坐标,通过对大量的特征点进
    行投影得其一个不规则的多边形,进而梯形法求面积法求出该土地的
    面积。

    为了对本发明的上述原理更加深刻的理解,下面我们讲结合附图
    对本发明的原理做详细阐述。

    如图1所示,本发明的特征点的三维坐标测量基本原理为:利用
    左视图与右视图之间的视差关系,根据双目视觉测距的原理如图3所
    示,我们根据三角关系可以计算出该特征点的三维坐标。

    在实施例中,特征点的三维坐标由以下公式获得,包括图像像素
    系与世界坐标系之间的转换。

    T D = T - ( x l - x r ) D - f D = T f x l - x r = T f d ]]>

    Z c u v 1 = k u s u 0 0 k v v 0 0 0 1 R T X w Y w Z w 1 ]]>

    其中,d=xl-xr,为位视差,xl,xr为空间任意一点P分别为左右
    图像中的成像一个成像坐标;l和r分别为left和right的缩写;f为
    焦距;D为深度值;T1为两个摄像机之间的距离;s为扭转因子;
    ku=f/dx;kv=f/dy;ku,kv,s,u0,v0为相机内部结构参数矩阵;
    其中[uv1]T表示特征点在图像上的点的坐标,u,v分别代表像素值;
    R为正交单位转换矩阵;T为三维平移矢量,[RT]为相机的外参数
    矩阵;(Xw,Yw,Zw)为在世界坐标系空间任意点P的三维坐标;(Xc,Yc,Zc)
    为在相机坐标系空间任意点P的齐次坐标。

    如图2所示,为本发明实施方式的基于双目视觉的土地面积的快
    速检测方法图像处理流程图,包括:图像数据采集、图像平滑滤波、
    特征点的提取、特征点的匹配、坐标提取算法、面积计算,各步骤的
    具体算法描述如下:

    步骤S1中,图像的数据采集,由两个CMOS摄像机组成的双
    目摄像机,其双目摄像机的标定是采用ZZhang的平面模板两步法进
    行标定,求出相机的外在参数[RT],ZZhang的平面模板两步法的
    计算流程如下:

    (1)初始化畸变参数为0。选取图像中心附近畸变较小的点,将
    它们的世界坐标值和图像坐标值作为已知条件代入,由线性方法求摄
    像机的内外参数。

    (2)利用优化算法对摄像机的内外参数进行求精。

    (3)将第(2)步计算出来的内外参数作为初始值,然后选取模板平
    面上的所有点,建立一个优化模型求得摄像机的内部参数,外部参数
    以及畸变参数的最优解。

    所述实施例中通过开关ARM人机交互平台上的触发开关获得左
    视图像与右视图像。

    步骤S2中,由光学成像系统生成的二维图像,包含各种随机噪
    声和畸变,因此需对原始图进行预处理,以改善图像的视觉效果,提
    高图像的清晰度,使图像变得更有利于计算机的处理、特征的提取。

    本发明的实施例的图像平滑滤波处理由如下公式得到:

    g [ i , j ] = f [ i , j ] h [ i , j ] = Σ k = - n n Σ l = - m m f [ i - k , j - l ] h [ k , l ] ]]>

    式中,[i,j]为图像中的任意一个像素;k,l=1,0,-1;m,n表
    示卷积模板的大小;f[i,j]为图像的离散输入、h[i,j]为脉冲响应函数
    的离散输入、为卷积运算符、g[i,j]为滤波后图像的离散输出。

    步骤S3中,特征提取是为了得到匹配赖以进行的图像特征,本
    发明实施例所采用的匹配特征为点状特征,所采取的特征点的检测方
    法为Harris检测方法和Canny边缘探测器分别提取左右图像的角点和
    边缘。

    特征匹配,如附图3所示,更具体地讲,选取被测物体在两幅图
    像中的几何特征,基于极线约束关系建立初始匹配关系,并进行对称
    性测试,剔除一些虚假匹配。然后基于区域匹配方式对特征点附近的
    子图像窗口的图像纹理信息或边缘轮廓进行相关运算,并进行相似度
    比较和对称性测试。最终匹配正确的特征点,参加视差计算。

    步骤S4中,所述面积提取算法是步骤S3中提取的匹配的特征点
    对,结合附图1中的原理和公式:

    Z c i u v 1 = M i X Y Z 1 , i = 1 , 2 ]]>

    其中 M 1 = m 11 1 m 12 1 m 13 1 m 14 1 m 21 1 m 22 1 m 23 1 m 24 1 m 31 1 m 32 1 m 33 1 m 34 1 ; M 2 = m 11 2 m 12 2 m 13 2 m 14 2 m 21 2 m 22 2 m 23 2 m 24 2 m 31 2 m 32 2 m 33 2 m 34 2 , ]]>

    本实施例中相机通过标定求取投影矩阵M1、M2,由以上两式消
    去Zc1,Zc2可得关于X,Y,Z的四个线性方程,由此可以确定两条直线,
    联立运用最小二乘法求得其解即为该点的三维坐标。

    步骤S5中,对所得的边界点进行投影到一个平面上,该平面到
    所有点的距离之和最小,在该平面上投影的点即为一个不规则的多边
    形。本发明的实施例对多边形应用梯形法求解该多边形的面积,假设
    该多边形有n条边,梯形法求面积公式如下:

    S = | Σ i = 1 n 1 2 ( x i + 1 - x i ) ( y i + 1 - y i ) | ]]>

    其中,S为所求多边形的面积;(xi,yi)为变换后的一个顶点,而
    (xi+1,yi+1)为变换后紧挨着(xi,yi)顶点的下一个顶点坐标,以其中一个
    顶点为原点的坐标;xn+1=x1=0,yn+1=y1=0。

    如图4所示,本发明的另一方面是相对应地提出基于双目视觉的
    土地面积快速检测结构,连接参考附图4。

    基于双目视觉的土地面积快速检测装置,包括两个CMOS摄像
    机1、2、用于支撑CMOS摄像机的支撑架、图像采集处理装置模块
    3、数据传输电缆、USB接口模块、ARM11嵌入式处理平台4、供
    ARM11嵌入式处理平台用电的电源模块5、LCD控制模块6、LCD
    显示模块7以及Flash&DRAM8,所述的CMOS摄像机分别与图像采
    集处理装置模块、ARM11嵌入式处理平台连接,所述的图像采集处
    理装置模块分别与CMOS摄像机、ARM11嵌入式处理平台双向连接;
    所述的ARM11嵌入式处理平台分别与LCD控制模块、Flash&DRAM
    双向连接,所述的LCD控制模块与LCD显示模块连接。

    所述的两个CMOS摄像机由相同型号的工业数字摄像机组成;
    所述的CMOS摄像机与图像采集处理装模块之间的数据传输电缆长
    度在5m以内。

    所述的图像采集处理装模块与ARM11嵌入式处理平台之间通过
    5m以内的数据传输电缆连接或无线通信模块进行传输。

    本发明实施例的基于双目视觉的土地面积快速检测装置包括双
    目摄像机模块、图像采集处理模块、ARM嵌入式人机交互平台、LCD
    显示模块。

    双目摄像机模块用于采集场景的左视图和右视图。图像采集处理
    模块包括FPGA处理器和DSP处理器等,用于对所采集的图像对进
    行数字处理运算。ARM嵌入式平台包括存储模块、LCD控制模块和
    LCD显示模块,实现人机交互。

    具体地,本发明的上述实施例具有以下优点:

    本发明的装置结构简单,使用方便快捷,通用性强,对各种复杂
    的环境均适用,自动化程度高等优点。本发明的上述方法步骤简单,
    易于实现,能够有效地对不规则的土地面积做出快速检测。有效地弥
    补了传统面积测量的不足,提高测量效率。

    在本说明书的所述参考术语中的连接或传输,可以指用数据传输
    电缆连接或传输,也可指用无线通信的方式进行传输。本说明书中所
    述实施例并非均为相同的实施例,而且,描述的具体特征、结构、材
    料或者特点均可在任何一个或多个实施例或示例中以合适的方式结
    合。

    以上所述仅是本发明的优选实施方式,应当指出,对于本领域的
    普通技术人员来讲,在不脱离本发明技术原理的前提下,对这些实施
    例做出多种改进、修改和变型,这些变化由本发明的权利要求等同限
    制并加以实施。

    关 键  词:
    基于 双目 视觉 土地面积 快速 检测 方法 及其 装置
      专利查询网所有文档均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    0条评论

    还可以输入200字符

    暂无评论,赶快抢占沙发吧。

    关于本文
    本文标题:基于双目视觉的土地面积快速检测方法及其检测装置.pdf
    链接地址:https://www.zhuanlichaxun.net/p-6261880.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    copyright@ 2017-2018 zhuanlichaxun.net网站版权所有
    经营许可证编号:粤ICP备2021068784号-1