法律状态公告日
法律状态信息
法律状态
2020-01-10
未缴年费专利权终止 IPC(主分类):G06T7/215 授权公告日:20181002 终止日期:20190120 申请日:20160120
专利权的终止
2018-10-02
授权
授权
2016-08-03
实质审查的生效 IPC(主分类):G06T7/20 申请日:20160120
实质审查的生效
2016-07-06
公开
公开
技术领域
本发明涉及的是一种图像处理领域的技术,具体是一种基于时空域显著性分析和稀疏表示的红外运动目标检测方法。
背景技术
红外成像能够在低能见度环境捕捉热目标,不受光照、目标形状或成像角度等因素的影响。红外监控系统能够应用于室内外环境监控,具有全天候、环境适应性强等特点。与可见光视频图像相比,红外图像因其背景相对简单,目标和背景的区分效果较好。
运动目标检测是指:通过图像处理方法在视频序列中提取与固定或移动背景存在着相对运动的前景目标,为更高级的运动分析和场景理解提供支持,作为计算机视觉领域的一个重要研究方向,在智能监控系统、人机交互系统等领域得到广泛应用。
精确定位红外序列图像中运动目标的位置,并提取其完整边缘是红外目标检测的关键。红外成像系统中运动目标不仅受到背景和噪声的影响,还受到来自红外探测器自身的干扰,导致摄取的图像降质严重,清晰度和对比度较差。而红外目标的模糊边缘、缺少明显形状和纹理特征的背景,也增加了分割方法的难度。
以差分法、背景差法、光流法等为代表的经典方法,通过获取背景模型并比较帧间差异进而检测运动目标。由于上述方法的性能高度依赖于获取的背景模型的精度,方法鲁棒性差,在场景变动或外界干扰时会严重降低图像的对比度和信噪比,影响对红外目标的识别。另外,由于混合高斯法的背景模型收敛较慢,遇到低速大目标时该法检测效果并不理想。
经过对现有技术的检索发现,中国专利文献号CN103996209A,公开日2014.8.20,公开了一种基于显著性区域检测的红外舰船目标分割方法,包含七个步骤:一、局部行对比度检测;二、边缘强度检测;三、显著线性结构检测;四、亮前景区域检测;五、显著性区域检测;六、局部显著性区域分割,对显著性图像分区域用基于均值、标准差和估计背景构造的自适应阈值处理得到初步舰船分割结果;七、显著性区域筛选,对于初步结果用显著性特征和形状特征进行筛选判别,最终得到舰船目标分割结果。但该技术在进行显著性检测后直接进行特征融合形成显著性图像,未对图像进行预前处理,增大了后期筛选的复杂度和计算量;并且不能满足实时性要求,没有考虑帧间图像运动目标的移动速度,不适于快速运动小目标的检测,普适性较弱。
发明内容
本发明针对现有技术存在的上述不足,提出一种基于时空域显著性分析和稀疏表示的红外运动目标检测方法,通过稀疏表示法平滑粗分割的子区域,提取对比特征和局部先验特征,根据融合规则确定显著性区域后融合形成显著图;对显著图进行分割和去除干扰后得到较为精确的红外运动目标图像。
本发明是通过以下技术方案实现的:
本发明通过稀疏表示方法对红外序列图像粗分割后的子区域进行平滑处理,提取各子区域的对比特征和局部先验特征,并进行合并,从而得到红外序列图像对应的显著图;再根据预设的阈值和形态学方法对显著图依次进行分割和伪目标区域的滤除,得到红外目标图像。
所述的稀疏表示方法为基于K-SVD字典学习的稀疏表示方法。
所述的平滑处理是指:计算并去除连续帧之间的方向图中和前景图中的伪目标区域,得到连续帧之间的光流矢量的方向信息的修正值和前景特征的修正值。
所述的合并是指:对各子区域的对比特征和局部先验特征根据融合规则分别进行合并,确定显著性区域,即Sj=Cj·LPj,其中:Sj为显著性区域,Cj为对比特征,LPj为局部先验特征。
所述的对比特征
所述的局部先验特征
技术效果
与现有技术相比,本发明基于稀疏表示法和显著性分析,设定固定阈值,得到较精确的运动目标的红外图像,设计合理,计算复杂度降低,可满足红外监控系统快速精确检测地面运动目标的需要;并且很好地解决了提取目标边缘模糊的问题,与传统的检测方法相比,具有较好的自适应性和检测效果。
附图说明
图1为本发明示意图;
图2为稀疏表示示意图;
图3为各方法第二帧处理效果图;
图中:(a)为原始红外图像,(b)为本发明处理效果图,(c)为帧差法处理效果图,(d)为高斯混合模型处理效果图,(e)为光流法处理效果图;
图4为各方法第十五帧处理效果图;
图中:(a)为原始红外图像,(b)为本发明处理效果图,(c)为帧差法处理效果图,(d)为高斯混合模型处理效果图,(e)为光流法处理效果图。
具体实施方式
如图1所示,本实施例包括以下步骤:
步骤1、对采集到的若干帧红外序列图像Ij进行基于分级流视频分割的粗分割处理,得到灰度值接近的多个子区域。
步骤2、通过稀疏表示方法对各个子区域进行平滑处理,提取各子区域对应的对比特征和局部先验特征,并根据融合规则进行合并,确定显著性区域,进而得到红外序列图像Ij对应的显著图,具体包括以下步骤:
步骤2.1)计算连续帧之间的光流矢量
所述的方向信息oj=(Gx,Gy),其中:
所述的前景特征
步骤2.2)如图2所示,通过基于K-SVD字典学习的稀疏表示方法去除方向图和前景图中的伪目标区域,得到方向信息oj的修正值o′j和前景特征fj的修正值f′j,具体包括:
步骤2.2.1)选取DCT(离散余弦变换)字典为初始化字典,尺寸由分块大小n决定,n为自然数,初始字典D0中包含的每个原子信号为n2维,由4n2个原子信号组成。
步骤2.2.2)将方向信息oj和前景特征fj采用小块方式由上到下,从左至右按像素展开,每个小块展开成一列作为稀疏处理对象Xo和Xf。
步骤2.2.3)采用OMP方法稀疏编码:将Xo和Xf中的每一列
步骤2.2.4)字典和稀疏矩阵的更新:字典和稀疏矩阵同时更新,更新方式为字典的列和稀疏矩阵的行。即:分别选择稀疏矩阵Yo和Yj中p行的非零值为对应D0中第p个原子在Xo和Xf对应p行中的非零值列中的贡献权值。Xo和Xf对应p行中的非零值列组成矩阵Ω,Yo和Yj对应p行中的非零值列组成矩阵Θ,为使E=Ω-D0*Θ最小,采用最大的奇异值分解,得到U、V和T,用U更新字典的第p个原子,V*T’更新Yo和Yj中p行的非零值,依次更新整个字典和稀疏矩阵Y′o和Y′f,即方向信息的修正值o′j和前景信息的修正值f′j。
步骤2.3)提取各个子区域的对比特征和局部先验特征,根据融合规则进行合并,即Sj=Cj·LPj,其中:Sj为显著性区域,对比特征
步骤3、归一化显著图并通过预设的阈值法进行分割,通过形态学方法去除孤立区域,得到红外目标图像。
所述的阈值为0.05。
所述的分割形成红外目标区域和背景区域。
所述的形态学方法是指:通过开闭运算实现空间频率图像中的伪聚焦区域的滤除,即:
步骤4、通过选取若干指标对得到的红外目标进行有效性证明,与帧差法、高斯混合模型和光流法之间的比较结果如图3和图4所示,本实施例经证明可精确提取红外目标。
所述的指标包括:召回率、特异度、精度和结构相似度,对比结果如表1所示。
所述的指标的值越大,说明提取的红外目标越接近真实目标;前景点错误率和分类错误率的值越低,说明检测结果越准确。
表1各方法性能比较
由表1可得,本实施例所有指标均优于其他方法。
上述具体实施可由本领域技术人员在不背离本发明原理和宗旨的前提下以不同的方式对其进行局部调整,本发明的保护范围以权利要求书为准且不由上述具体实施所限,在其范围内的各个实现方案均受本发明之约束。
机译: 基于径向基函数网络的基于主成分分析的运动目标检测方法及装置
机译: 基于在接收时获得的数据的分析,同时确认低功率广域网中许多消息的方法以及在通过UNB LPWAN网络传输数据时使用频率校正的方法
机译: 基于躺下扫描时的对齐和躺着冒号和形状时进行扫描的对齐方式进行分析的方法,用于对存储进行虚假减法的方法和装置