书签 分享 收藏 举报 版权申诉 / 21

基于对象随机游走的遥感图像视觉显著性检测方法及系统.pdf

  • 上传人:大师****2
  • 文档编号:4703786
  • 上传时间:2018-10-28
  • 格式:PDF
  • 页数:21
  • 大小:3.71MB
  • 摘要
    申请专利号:

    CN201410763638.0

    申请日:

    2014.12.11

    公开号:

    CN104408733A

    公开日:

    2015.03.11

    当前法律状态:

    授权

    有效性:

    有权

    法律详情:

    授权|||实质审查的生效IPC(主分类):G06T7/00申请日:20141211|||公开

    IPC分类号:

    G06T7/00; G06K9/46

    主分类号:

    G06T7/00

    申请人:

    武汉大学

    发明人:

    邵振峰; 王星

    地址:

    430072湖北省武汉市武昌区珞珈山武汉大学

    优先权:

    专利代理机构:

    武汉科皓知识产权代理事务所(特殊普通合伙)42222

    代理人:

    严彦

    PDF完整版下载: PDF下载
    内容摘要

    一种基于对象随机游走的遥感图像视觉显著性检测方法及系统,包括进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并;对于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合;对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图;融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图。

    权利要求书

    权利要求书
    1.  一种基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于,包括以下步骤:
    步骤一,设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果;
    步骤二,对于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合,实现方式如下,
    设原始遥感图像I在任一尺度n下的分割结果为SEGn,n=1,2,...,N,N为尺度总数,SEGn中任一分割区域记为i=1,2,...,R(n),R(n)为尺度n下的分割区域总数,以分割区域为基础,构建对象统计分割区域的基本属性以及视觉特征,得到尺度n下的对象集合
    其中,分割区域的基本属性包括面积中心坐标和邻接对象集合{Objk(n)|k∈NB(Obji(n))},]]>为对象的所有邻接对象序值编号的集合;
    步骤三,对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,实现方式如下,
    对于尺度n下的对象集合若两个对象在空间上不相邻,则它们之间的边缘权重为0,若两个对象在空间上相邻,则它们之间的边缘权重按下式计算,
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,为对象与某个邻接对象之间的边缘权重,表示对象间的视觉特征差异因子,根据相应视觉特征得到;表示对象的中心间的空间距离因子,根据相应中心坐标得到;
    计算注意焦点在对象与对象集合中任一对象之间的转移概率如下,
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    其中,k=1,2,...,R(n);
    构建注意焦点在对象集合中各个对象间的转移概率矩阵P(n)如下,
    P(n)=p1,1(n)p1,2(n)···p1,R(n)(n)p2,1(n)p2,2(n)···p2,R(n)(n)············pR(n),1(n)pR(n),2(n)···pR(n),R(n)(n)]]>
    步骤四,对于每个尺度下的对象集合,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图,实现方式如下,
    设对于尺度n下的对象集合注意焦点在所有对象间的平稳分布为平稳分布Π(n)中任一元素为注意焦点集中在对象上的概率,Π(n)=Π(n)·P(n);
    计算对象对应的对象面积因子
    根据对象的概率和对象面积因子计算对象的视觉显著性如下,
    Si(n)=πi(n)·Ai(n)]]>
    进行归一化如下,
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    其中,为对象的归一化视觉显著性,根据尺度n下的对象集合中各对象的归一化视觉显著性,得到尺度n下的归一化视觉显著图;
    步骤五,融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图,实现方式如下,
    设原始遥感图像I中的任一像素为p,则像素p相应多尺度融合的视觉显著性按下式计算,
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    l(p∈Obji(n))=1,p∈Obji(n)0,p∉Obji(n)]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个预设的常数,为指示函数;
    获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理如下,
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值,完成上述线性归一化处理后,得到最终的视觉显著图。

    2.  根据权利要求1所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤一中,对原始遥感图像进行多尺度分割时,采用分水岭分割方法、Quick Shift方法或基于图论的分割方法。

    3.  根据权利要求1所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤三中,根据下式计算,
    DSpt(Obji(n),Objk(n))=exp(-(N(||centeri(n)-centerk(n)||))2/σ)]]>
    其中,为对象对象分别的中心坐标间的欧氏距离,N(·)为线性归一化函数,σ为预设的常数。

    4.  根据权利要求1或2或3所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤二中,提取的分割区域的视觉特征为颜色特征、亮度特征或者纹理特征。

    5.  根据权利要求1或2或3所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤三中,根据下式计算,
    DFea(Obji(n),Objk(n))=exp(N(χ2(Vfi(n),Vfk(n))))-1]]>
    其中,分别为对象对象的视觉特征,χ2(·)为视觉特征间的卡方距离,N(·)为线性归一化函数。

    6.  根据权利要求1或2或3所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤四中,根据边缘权重进行如下快速计算获得,
    πi(n)=Σkwi,k(n)/Σi,kwi,k(n)]]>
    其中,表示任一对象与所有相邻对象间的边缘权重之和,表示图中所有边缘权重之和。

    7.  根据权利要求1或2或3所述基于对象随机游走的遥感图像视觉显著性检测方法,其特征在于:步骤四中,计算对象对应的对象面积因子如下,
    Ai(n)=1/(1+(Y·areai(n)/(iw·ih))2)]]>
    其中,iw和ih分别为原始遥感图像的宽和高,Y为预设的常数。

    8.  一种基于对象随机游走的遥感图像视觉显著性检测系统,其特征在于,包括以下模块:
    多尺度分割模块,用于设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果;
    视觉特征提取模块,用于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合,实现方式如下,
    设原始遥感图像I在任一尺度n下的分割结果为SEGn,n=1,2,...,N,N为尺度总数,SEGn中任一分割区域记为i=1,2,...,R(n),R(n)为尺度n下的分割区域总数,以分割区域为基础,构建对象统计分割区域的基本属性以及视觉特征,得到尺度n下的对象集合
    其中,分割区域的基本属性包括面积中心坐标和邻接对象集合{Objk(n)|k∈NB(Obji(n))},]]>为对象的所有邻接对象序值编号的集合;
    转移概率计算模块,用于对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边 缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,实现方式如下,
    对于尺度n下的对象集合若两个对象在空间上不相邻,则它们之间的边缘权重为0,若两个对象在空间上相邻,则它们之间的边缘权重按下式计算,
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,为对象与某个邻接对象之间的边缘权重,表示对象间的视觉特征差异因子,根据相应视觉特征得到;表示对象的中心间的空间距离因子,根据相应中心坐标得到;
    计算注意焦点在对象与对象集合中任一对象之间的转移概率如下,
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    其中,k=1,2,...,R(n);
    构建注意焦点在对象集合中各个对象间的转移概率矩阵P(n)如下,
    P(n)=p1,1(n)p1,2(n)···p1,R(n)(n)p2,1(n)p2,2(n)···p2,R(n)(n)············pR(n),1(n)pR(n),2(n)···pR(n),R(n)(n)]]>
    视觉显著性提取模块,用于对于每个尺度下的对象集合,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图,实现方式如下,
    设对于尺度n下的对象集合注意焦点在所有对象间的平稳分布为平稳分布Π(n)中任一元素为注意焦点集中在对象上的概率,Π(n)=Π(n)·P(n);
    计算对象对应的对象面积因子
    根据对象的概率和对象面积因子计算对象的视觉显著性如下,
    Si(n)=πi(n)·Ai(n)]]>
    进行归一化如下,
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    其中,为对象的归一化视觉显著性,根据尺度n下的对象集合中各对象的归一化视觉显著性,得到尺度n下的归一化视觉显著图;
    多尺度视觉显著性融合模块,用于融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图,实现方式如下,
    设原始遥感图像I中的任一像素为p,则像素p相应多尺度融合的视觉显著性按下式计算,
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    l(p∈Obji(n))=1,p∈Obji(n)0,p∉Obji(n)]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个预设的常数,为指示函数;
    获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理如下,
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值,完成上述线 性归一化处理后,得到最终的视觉显著图。

    说明书

    说明书基于对象随机游走的遥感图像视觉显著性检测方法及系统
    技术领域
    本发明涉及图像处理技术领域,更具体地说,涉及一种基于对象随机游走的遥感图像视觉显著性检测方法及系统。
    背景技术
    遥感作为一种主要的对地观测技术,其所获取的高分辨率光学图像是对地球表面各类地物的空间分布最直观、真实的写照。由于地球表面积巨大,且地物覆盖类型繁多、变化复杂,因此获取的高分辨率遥感图像呈现出数据上的海量性、内容上的多样性以及结构上的复杂性。这些特性使得人们在使用计算机进行遥感图像自动化处理时,不但耗时较多,而且很难获取图像中主要地物对象或感兴趣区域的准确特征描述。目前,这一现象已成为制约遥感图像高效分析与应用的瓶颈问题。
    另一方面,早在上世纪80年代,视觉神经学家们就发现,人类视觉系统(Human Visual System,HVS)在处理复杂场景中大量的视觉信息时,会选择性地关注某些重要的局部区域并忽略大部分不重要的背景区域,从而高效地获取复杂场景中关键的视觉信息。HVS的这种选择性注意机制在视觉行为上具体表现为注意焦点(Focus of Attention,FOA)的选择与转移。已有认知心理学的研究表明,FOA的转移路径具有一定的随机性,并且采用适当的随机游走模型能够有效预测FOA的转移路径。在这一理论基础上,研究人员提出了一系列基于随机游走的视觉注意模型,用于预测图像的视觉显著性分布。但是,传统基于随机游走的视觉注意模型在提取图像显著区时仍然存在一定的局限性,主要表现在两个方面:首先,传统模型都以像素为基本单元,计算每个像素对应的显著值,在构建马尔可夫链的过程中,设置的节点过多,转移概率矩阵过大,计算复杂度很高;其次,传统模型计算所得的显著图都经过了高斯平滑处理,显著区域的边缘非常模糊,对于提取高分辨率遥感图像的显著地物对象十分不利。因此,如何针对高分辨率遥感图像分析与应用的需求,构建准确高效的遥感图像视觉显著性检测方案是一个亟待解决的问题。
    发明内容
    本发明的目的在于针对现有技术的缺点和不足,提供一种基于对象随机游走的遥感图像视觉显著性检测方法,将面向对象的图像分析思想引入到视觉注意模型中,通过模拟FOA在 图像对象间的转移路径来计算图像中所有对象的视觉显著性分布,以获取整幅图像的视觉显著图。
    本发明所采用的技术方案是一种基于对象随机游走的遥感图像视觉显著性检测方法,包括以下步骤:
    步骤一,设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果;
    步骤二,对于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合,实现方式如下,
    设原始遥感图像I在任一尺度n下的分割结果为SEGn,n=1,2,...,N,N为尺度总数,SEGn中任一分割区域记为i=1,2,...,R(n),R(n)为尺度n下的分割区域总数,以分割区域为基础,构建对象统计分割区域的基本属性以及视觉特征,得到尺度n下的对象集合{Obji(n)}i=1R(n);]]>
    其中,分割区域的基本属性包括面积中心坐标和邻接对象集合{Objk(n)|kNB(Obji(n))},]]>为对象的所有邻接对象序值编号的集合;
    步骤三,对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,实现方式如下,
    对于尺度n下的对象集合若两个对象在空间上不相邻,则它们之间的边缘权重为0,若两个对象在空间上相邻,则它们之间的边缘权重按下式计算,
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,为对象与某个邻接对象之间的边缘权重,表示对象间的视觉特征差异因子,根据相应视觉特征得到;表示对象的中心间的空间距离因子,根据相应中心坐标得到;
    计算注意焦点在对象与对象集合中任一对象之间的转移概率如下,
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    其中,k=1,2,...,R(n);
    构建注意焦点在对象集合中各个对象间的转移概率矩阵P(n)如下,
    P(n)=p1,1(n)p1,2(n)...p1,R(n)(n)p2,1(n)p2,2(n)...p2,R(n)(n)............pR(n),1(n)pR(n),2(n)...pR(n),R(n)(n)]]>
    步骤四,对于每个尺度下的对象集合,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图,实现方式如下,
    设对于尺度n下的对象集合注意焦点在所有对象间的平稳分布为平稳分布Π(n)中任一元素为注意焦点集中在对象上的概率,Π(n)=Π(n)·P(n);
    计算对象对应的对象面积因子
    根据对象的概率和对象面积因子计算对象的视觉显著性如下,
    Si(n)=πi(n)·Ai(n)]]>
    进行归一化如下,
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    其中,为对象的归一化视觉显著性,根据尺度n下的对象集合中各对象的归一化视觉显著性,得到尺度n下的归一化视觉显著图;
    步骤五,融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图,实现方式如下,
    设原始遥感图像I中的任一像素为p,则像素p相应多尺度融合的视觉显著性按下式计算,
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    l(p∈Obji(n))=1,p∈Obji(n)0,p∈Obji(n)]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个预设的常数,为指示函数;
    获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理如下,
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值,完成上述线性归一化处理后,得到最终的视觉显著图。
    而且,步骤一中,对原始遥感图像进行多尺度分割时,采用分水岭分割方法、Quick Shift方法或基于图论的分割方法。
    而且,步骤三中,根据下式计算,
    DSpt(Obji(n),Objk(n))=exp(-(N(||centeri(n)-centerk(n)||))2/σ)]]>
    其中,为对象对象分别的中心坐标间的欧氏距离,N(·)为线性归一化函数,σ为预设的常数。
    而且,步骤二中,提取的分割区域的视觉特征为颜色特征、亮度特征或者纹理特征。
    而且,步骤三中,根据下式计算,
    DFea(Obji(n),Objk(n))=exp(N(χ2(Vfi(n),Vk(n))))-1]]>
    其中,分别为对象对象的视觉特征,χ2(·)为视觉特征间的卡方距离,N(·)为线性归一化函数。
    而且,步骤四中,根据边缘权重进行如下快速计算获得,
    πi(n)=Σkwi,k(n)/Σi,kwi,k(n)]]>
    其中,表示任一对象与所有相邻对象间的边缘权重之和,表示图中所有边缘权重之和。
    而且,步骤四中,计算对象对应的对象面积因子如下,
    Ai(n)=1/(1+(Y·areai(n)/(iw·ih))2)]]>
    其中,iw和ih分别为原始遥感图像的宽和高,Y为预设的常数。
    本发明还相应提供一种基于对象随机游走的遥感图像视觉显著性检测系统,包括以下模块:
    多尺度分割模块,用于设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果;
    视觉特征提取模块,用于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合,实现方式如下,
    设原始遥感图像I在任一尺度n下的分割结果为SEGn,n=1,2,...,N,N为尺度总数,SEGn中任一分割区域记为i=1,2,...,R(n),R(n)为尺度n下的分割区域总数,以分割区域为基础,构建对象统计分割区域的基本属性以及视觉特征,得到尺度n下的对象集合
    其中,分割区域的基本属性包括面积中心坐标和邻接对象集合{Objk(n)|k∈NB(Obji(n))},]]>为对象的所有邻接对象序值编号的集合;
    转移概率计算模块,用于对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,实现方式如下,
    对于尺度n下的对象集合若两个对象在空间上不相邻,则它们之间的边缘权重为0,若两个对象在空间上相邻,则它们之间的边缘权重按下式计算,
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,为对象与某个邻接对象之间的边缘权重,表示对象间的视觉特征差异因子,根据相应视觉特征得到;表示对象的中心间的空间距离因子,根据相应中心坐标得到;
    计算注意焦点在对象与对象集合中任一对象之间的转移概率如下,
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    其中,k=1,2,...,R(n);
    构建注意焦点在对象集合中各个对象间的转移概率矩阵P(n)如下,
    P(n)=p1,1(n)p1,2(n)...p1,R(n)(n)p2,1(n)p2,2(n)...p2,R(n)(n)............pR(n),1(n)pR(n),2(n)...pR(n),R(n)(n)]]>
    视觉显著性提取模块,用于对于每个尺度下的对象集合,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图,实现方式如下,
    设对于尺度n下的对象集合注意焦点在所有对象间的平稳分布为平稳分布Π(n)中任一元素为注意焦点集中在对象上的概率,Π(n)=Π(n)·P(n);
    计算对象对应的对象面积因子
    根据对象的概率和对象面积因子计算对象的视觉显著性如下,
    Si(n)=πi(n)·Ai(n)]]>
    进行归一化如下,
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    其中,为对象的归一化视觉显著性,根据尺度n下的对象集合中各对象的归一化视觉显著性,得到尺度n下的归一化视觉显著图;
    多尺度视觉显著性融合模块,用于融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图,实现方式如下,
    设原始遥感图像I中的任一像素为p,则像素p相应多尺度融合的视觉显著性按下式计算,
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    l(p∈Obji(n))=1,p∈Obji(n)0,p∈Obji(n)]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个预设的常数,为指示函数;
    获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理如下,
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值,完成上述线性归一化处理后,得到最终的视觉显著图。
    受面向对象的图像分析思想启发,本发明将每个尺度下的图像分割结果视为一幅无向加权图,而每个对象对应于图中的一个节点,对象间的特征差异可作为节点之间边缘权重的计算依据,由此则可构建一个FOA在对象间转移的马尔可夫链,最终通过计算FOA在图像对象间的平稳分布来获得各对象的视觉显著性。本发明提供的技术方案的有益效果为,通过引 入面向对象的图像分析思想,采用由空间相邻的相似像素组成的图像对象替代单个像素作为显著性计算的基本单元,不但能够有效减少马尔可夫链中的节点数,降低算法复杂度,而且计算所得的视觉显著图中显著区域边缘清晰,显著目标轮廓分明,结果符合人类视觉感知特性,有利于自动提取遥感图像中的感兴趣区域。同时,本发明提供的技术方案具有良好的可扩展性,所采用的分割区域视觉特征包括但不限于本发明中所提及的颜色、亮度和纹理,只要是符合人类视觉感知特性的特征,都能顺利地纳入本发明提供的技术方案中。此外,本发明提供的技术方案适用于多种地物类型的遥感图像感兴趣区域自动提取。
    附图说明
    图1为本发明实施例的流程图。
    具体实施方式
    本发明提出的基于对象随机游走的遥感图像视觉显著性检测技术方案先对原始遥感图像进行多尺度分割,并在每个尺度下对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果,随后对于每个尺度下的分割结果,提取每个分割区域的视觉特征,构建当前尺度下的图像对象集合,接着对于每个尺度下的对象集合,通过对象间的特征差异计算其对应的边缘权重,进而计算FOA在对象间的转移概率,获得FOA的转移概率矩阵,然后根据FOA的转移概率矩阵计算FOA在所有对象间的平稳分布,并由该平稳分布中每个对象对应的概率进一步计算其视觉显著性,获得当前尺度下的视觉显著图,最后融合各个尺度下的视觉显著图,获得该遥感图像最终的视觉显著图。其中主要包括多尺度分割及区域合并、提取对象视觉特征、计算FOA在对象间的转移概率、计算对象视觉显著性和多尺度视觉显著性融合五个步骤。
    具体实施时,本发明技术方案可采用计算机技术实现自动运行流程。为详细说明本发明技术方案,参见图1,提供实施例流程具体说明如下:
    步骤S01,设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果。
    对原始遥感图像进行多尺度分割时,采用主流的图像多尺度分割方法即可,例如分水岭分割方法、Quick Shift方法和基于图论的分割方法等。实施例首先设置一组多尺度的分割参数,并采用一种高效的基于图论的图像分割方法(Felzenszwalb and Hunttenlocher,2004)对原始遥感图像进行多尺度分割。基于图论的图像分割方法为现有技术,本发明不予赘述,具体实施时可参考文献:Felzenszwalb P,Huttenlocher D.2004.Efficient graph-based image segmentation[J].International Journal of Computer Vision,59(2):167-181.
    在进行图像多尺度分割的基础上,对于每个尺度下的初始分割结果,分别统计每个分割区域在CIELab颜色空间的颜色直方图,CIELab颜色空间是颜色-对立空间,维度L表示亮度,a和b表示颜色对立维度。其中L、a和b三个颜色通道分别量化为8级、16级和16级。然后,统计各个分割区域之间的邻接关系,并对颜色直方图之间卡方距离小于设定阈值(本领域技术人员可自行预设取值,实施例中为0.1)的邻接区域进行合并,最终获得多个尺度的分割结果。
    步骤S02,对于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的图像对象集合。
    实施例分别统计了每个尺度下各个分割区域的基本属性,并提取了各个分割区域的视觉特征。具体实施时,本领域技术人员可自行设定提取一种或多种视觉特征,建议提取的分割区域的视觉特征为颜色特征、亮度特征或者纹理特征。给定一幅原始遥感图像I,设其在任一尺度n下的分割结果为SEGn,其中n=1,2,...,N,N为尺度总数(本领域技术人员可自行预设取值,实施例中为8),SEGn中任一分割区域记为其中i=1,2,...,R(n),R(n)为尺度n下的分割区域总数。以分割区域为基础,构建对象还需统计该区域的以下基本属性以及视觉特征:
    (1)面积即该区域包含的像素总数;
    (2)中心坐标即该区域内所有像素二维坐标的均值;
    (3)邻接对象集合{Objk(n)|k∈NB(Obji(n))},]]>其中为对象的所有邻接对象序值编号的集合,此时序号为对象的任一邻接对象。
    视觉特征提取方式根据具体特征种类而定,例如:
    对于颜色特征向量,可采用HSV颜色空间中的H通道和CIELab颜色空间中的L、a、b三个通道,共同构建用于对象显著性计算的颜色特征图。HSV颜色空间中H、S、V三个通道分别表示色调、饱和度、亮度。首先将原始遥感图像从RGB颜色空间分别转换到HSV颜色空间和CIELab颜色空间,接着将H、L、a、b四个通道中的取值分别量化为4级、8级、16级、16级,然后将上述四个通道合并为一个4×8×16×16=8192级的颜色特征图,最后对于图像中的每个分割区域,统计其所包含像素的颜色特征直方图,即可得每个对象的颜色特征Clri(n)=(H1Clr,H2Clr,...,H8192Clr);]]>
    对于亮度特征向量,可将原始遥感图像从RGB颜色空间转换到HSV颜色空间,接着将V通道中的取值量化为256级,然后对于图像中的每个分割区域,统计其所包含像素的亮度特征直方图,即可得每个对象的亮度特征
    对于纹理特征向量,本发明首先将原始遥感图像灰度化,接着提取灰度化图像的LBP特征图和LC特征图,并将LC特征图量化为8级,然后将LBP特征图和LC特征图合并为一个纹理特征图,由于旋转不变的LBP模式仅有36种可能值,因此二者可以合并为一个36×8=288级的纹理特征图,最后对于图像中的每个分割区域,统计其所包含像素的纹理特征直方图,即可得每个对象的纹理特征
    完成SEGn中所有分割区域相应对象的上述基本属性及视觉特征统计后,即可构建尺度n下的对象集合n=1,2,...,N。
    步骤S03,对于每个尺度下的对象集合,分别通过对象间的特征差异计算其对应的边缘权重,并基于此计算FOA在对象间的转移概率,获得FOA的转移概率矩阵。
    实施例中,对于尺度n下的对象集合图像对象间的边缘权重主要由相邻对象间的视觉特征差异和对象中心间的空间距离两个因子决定,其计算公式为:
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,表示对象与其某个邻接对象之间的边缘权重,而若两个对象在空间上不相邻,则它们之间的边缘权重为0。
    表示两对象间的视觉特征差异因子,按下式计算,
    DFea(Obji(n),Objk(n))=exp(N(χ2(Vfi(n),Vk(n))))-1]]>
    其中,χ2(·)为视觉特征间的卡方距离,为两对象的视觉特征。
    例如对于颜色特征,其计算公式为:
    DFea(Obji(n),Objk(n))=exp(N(χ2(Clri(n),Clrk(n))))-1]]>
    其中,计算亮度特征或纹理特征差异时,替换公式中对应的特征即可。
    N(·)为线性归一化函数,设矩阵M中任一元素为mp,q,max(M)为矩阵中所有元素的最大值,则mp,q的线性归一化结果N(mp,q)的计算公式为:
    N(mp,q)=mp,qmax(M)]]>
    表示两对象中心间的空间距离因子,其计算公式为:
    DSpt(Obji(n),Objk(n))=exp(-(N(||centeri(n)-centerk(n)||))2/σ)]]>
    其中,N(·)为线性归一化函数,为两对象中心坐标间的欧氏距离,σ为预设的常数,可采用经验值,实施例取0.4。获得所有对象间的边缘权重后,即可进一步计算FOA在对象与其邻接对象之间的转移概率扩展到计算FOA在对象与对象集合中任一对象之间的转移概率此时k=1,2,...,R(n),R(n)为尺度n下的分割区域总数,其计算公式如下:
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    对象与在空间上不相邻时,它们之间的边缘权重为0,相应也为0。对象与自己本身的转移概率也为0,因为k=i时,视觉特征差异因子也为0,相应为0。
    获得对象集合中所有对象与对象之间的转移概率后,即可构建FOA在对象集合中各个对象间的转移概率矩阵P(n),有R(n)行R(n)列,其表达式为:
    P(n)=p1,1(n)p1,2(n)...p1,R(n)(n)p2,1(n)p2,2(n)...p2,R(n)(n)............pR(n),1(n)pR(n),2(n)...pR(n),R(n)(n)]]>
    步骤S04,对于每个尺度下的对象集合,分别根据FOA的转移概率矩阵计算FOA在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算其视觉显著性并归一化,即可获得当前尺度下的归一化视觉显著图。
    实施例首先根据FOA的转移概率矩阵计算其在所有对象间的平稳分布。设对于尺度n下 的对象集合FOA的平稳分布为根据平稳分布的性质,其与转移概率矩阵P(n)的关系满足以下公式:
    Π(n)=Π(n)·P(n)
    实际上,平稳分布Π(n)中任一元素为FOA集中在对象上的概率,可通过上述边缘权重快速计算获得,因为非相邻对象的为0,可以只考虑相邻对象,即此时k∈NB(Obji(n)),]]>其计算式为:
    πi(n)=Σkwi,k(n)/Σi,kwi,k(n)]]>
    其中,表示任一节点(即对象)与其所有相邻节点(对象)间的边缘权重之和,表示图中所有边缘权重之和。除了FOA的平稳分布之外,实施例认为图像对象的视觉显著性还与对象的面积密切相关。对于一幅分割结果较为稳定的遥感图像来说,区域面积过大的对象往往都是图像的背景,因此在计算对象对应的对象面积因子时,需对大面积对象的视觉显著性加以抑制,抑制方式可由本领域技术人员设定,实施例中采用的计算公式如下:
    Ai(n)=1/(1+(Y·areai(n)/(iw·ih))2)]]>
    其中,iw和ih分别为原始遥感图像的宽和高,Y为常数,可预设采用经验值,实施例取0.52;(.)2表示括号内数值的平方。实验证明这种抑制方式较为有效。分别获得图像中每个对象的FOA平稳概率分布和面积因子后,即可计算其对应的视觉显著性计算公式如下:
    Si(n)=πi(n)·Ai(n)]]>
    为了在各个尺度下获得归一化的视觉显著图,实施例还对各个对象的视觉显著性进行了线性归一化处理。设和分别表示尺度n下所有对象的视觉显著性最大值和最小值,则对象的归一化视觉显著性的计算公式如下:
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    将计算所得的每个对象的视觉显著性赋予其所含像素,即可得到当前尺度下的归一化视 觉显著图。
    步骤S05,融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图。
    实施例通过加权融合的方式融合多个尺度的视觉显著图。设原始遥感图像I中的任一像素为p,则像素p多尺度融合的视觉显著性SMap(p)的计算公式如下:
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个常数(本领域技术人员可自行预设取值,建议取很小的数,实施例中设为0.1),为一个指示函数,其具体取值情况如下:
    l(p∈Obji(n))=1,p∈Obji(n)0,p∈Obji(n)]]>
    实施例计算获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理,计算公式如下:
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值。完成上述线性归一化处理后,即得到最终的视觉显著图。
    本发明还相应提供一种基于对象随机游走的遥感图像视觉显著性检测系统,包括以下模块:
    多尺度分割模块,用于设置多个尺度参数对原始遥感图像进行多尺度分割,并在每个尺度下分别对颜色特征相似的邻接区域进行合并,获得多个尺度的分割结果;
    视觉特征提取模块,用于每个尺度下的分割结果,分别提取每个分割区域的视觉特征,构建当前尺度下的对象集合,实现方式如下,
    设原始遥感图像I在任一尺度n下的分割结果为SEGn,n=1,2,...,N,N为尺度总数, SEGn中任一分割区域记为i=1,2,...,R(n),R(n)为尺度n下的分割区域总数,以分割区域为基础,构建对象统计分割区域的基本属性以及视觉特征,得到尺度n下的对象集合
    其中,分割区域的基本属性包括面积中心坐标和邻接对象集合{Objk(n)|k∈NB(Obji(n))},]]>为对象的所有邻接对象序值编号的集合;
    转移概率计算模块,用于对于每个尺度下的对象集合,通过对象间的特征差异计算对应的边缘权重,并计算注意焦点在对象间的转移概率,获得注意焦点的转移概率矩阵,实现方式如下,
    对于尺度n下的对象集合若两个对象在空间上不相邻,则它们之间的边缘权重为0,若两个对象在空间上相邻,则它们之间的边缘权重按下式计算,
    wi,k(n)=DFea(Obji(n),Objk(n))·DSpt(Obji(n),Objk(n))]]>
    其中,为对象与某个邻接对象之间的边缘权重,表示对象间的视觉特征差异因子,根据相应视觉特征得到;表示对象的中心间的空间距离因子,根据相应中心坐标得到;
    计算注意焦点在对象与对象集合中任一对象之间的转移概率如下,
    pi,k(n)=wi,k(n)/Σk=1R(n)wi,k(n)]]>
    其中,k=1,2,...,R(n);
    构建注意焦点在对象集合中各个对象间的转移概率矩阵P(n)如下,
    P(n)=p1,1(n)p1,2(n)...p1,R(n)(n)p2,1(n)p2,2(n)...p2,R(n)(n)............pR(n),1(n)pR(n),2(n)...pR(n),R(n)(n)]]>
    视觉显著性提取模块,用于对于每个尺度下的对象集合,分别根据注意焦点的转移概率矩阵计算注意焦点在所有对象间的平稳分布,由该平稳分布中每个对象对应的概率进一步计算视觉显著性并归一化,获得当前尺度下的归一化视觉显著图,实现方式如下,
    设对于尺度n下的对象集合注意焦点在所有对象间的平稳分布为平稳分布Π(n)中任一元素为注意焦点集中在对象上的概率,Π(n)=Π(n)·P(n);
    计算对象对应的对象面积因子
    根据对象的概率和对象面积因子计算对象的视觉显著性如下,
    Si(n)=πi(n)·Ai(n)]]>
    进行归一化如下,
    Saliencyi(n)=Si(n)-min({Si(n)})max({Si(n)})-min({Si(n)})]]>
    其中,为对象的归一化视觉显著性,根据尺度n下的对象集合中各对象的归一化视觉显著性,得到尺度n下的归一化视觉显著图;
    多尺度视觉显著性融合模块,用于融合各个尺度下的视觉显著图,即可获得该遥感图像最终的视觉显著图,实现方式如下,
    设原始遥感图像I中的任一像素为p,则像素p相应多尺度融合的视觉显著性按下式计算,
    SMap(p)=Σn=1NΣi=1R(n)Saliencyi(n)·(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))Σn=1NΣi=1R(n)(||Ip-ci(n)||+ϵ)-1·l(p∈Obji(n))]]>
    l(p∈Obji(n))=1,p∈Obji(n)0,p∈Obji(n)]]>
    其中,Ip为像素p在RGB颜色空间的三维特征向量,为对象中所有像素的RGB颜色特征向量均值,ε是一个常数,为指示函数;
    获得原始遥感图像I中所有像素多尺度融合的视觉显著性后,进一步对所有像素的视觉显著性进行线性归一化处理如下,
    SMapNor(p)=SMap(p)-min(SMap)max(SMap)-min(SMap)]]>
    其中,SMapNor(p)表示像素p经线性归一化处理后的视觉显著性,min(SMap)和max(SMap)分别表示线性归一化处理前所有像素视觉显著性的最小值和最大值,完成上述线性归一化处理后,得到最终的视觉显著图。
    具体模块实现参见方法相应步骤,本发明不予赘述。
    以上内容是结合最佳实施方案对本发明说做的进一步详细说明,不能认定本发明的具体实施只限于这些说明。本领域的技术人员应该理解,在不脱离由所附权利要求书限定的情况下,可以在细节上进行各种修改,都应当视为属于本发明的保护范围。

    关 键  词:
    基于 对象 随机 游走 遥感 图像 视觉 显著 检测 方法 系统
      专利查询网所有文档均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    0条评论

    还可以输入200字符

    暂无评论,赶快抢占沙发吧。

    关于本文
    本文标题:基于对象随机游走的遥感图像视觉显著性检测方法及系统.pdf
    链接地址:https://www.zhuanlichaxun.net/p-4703786.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    copyright@ 2017-2018 zhuanlichaxun.net网站版权所有
    经营许可证编号:粤ICP备2021068784号-1