首页> 中国专利> 一种无重叠视域下的行人再识别方法

一种无重叠视域下的行人再识别方法

摘要

本发明公开了一种无重叠视域下的行人再识别方法。首先快速检测监控视域下的行人目标并进行跟踪;然后由跟踪结果信息及视频帧信息利用GrabCut算法分割出精确的行人区域同时利用人体分割模型将人体分割成上半身和下半身两部分;之后利用分割好的行人上下半身序列分别构建行人上半身和下半身的HSV三通道稀疏字典,最后对另一监控视域下检测到的行人进行分割预处理之后对其进行稀疏重构,计算重构误差并融合判决从而得到匹配相似度。本发明提供的方法可以充分利用行人序列信息以及减小背景信息的干扰从而达到在不同摄像机不同视域下对同一行人目标在不同角度不同姿态下进行准确的识别。

著录项

  • 公开/公告号CN105574515A

    专利类型发明专利

  • 公开/公告日2016-05-11

    原文格式PDF

  • 申请/专利权人 南京邮电大学;

    申请/专利号CN201610029387.2

  • 申请日2016-01-15

  • 分类号G06K9/00(20060101);G06K9/62(20060101);G06K9/46(20060101);

  • 代理机构32207 南京知识律师事务所;

  • 代理人高玲玲

  • 地址 210003 江苏省南京市鼓楼区新模范马路66号

  • 入库时间 2023-12-18 15:12:16

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-03-22

    专利实施许可合同备案的注销 IPC(主分类):G06K 9/00 专利申请号:2016100293872 专利号:ZL2016100293872 合同备案号:X2019980001257 让与人:南京邮电大学 受让人:南京南邮信息产业技术研究院有限公司 发明名称: 解除日:20220304

    专利实施许可合同备案的生效、变更及注销

  • 2020-01-17

    专利实施许可合同备案的生效 IPC(主分类):G06K9/00 合同备案号:X2019980001257 让与人:南京邮电大学 受让人:南京南邮信息产业技术研究院有限公司 发明名称:一种无重叠视域下的行人再识别方法 申请公布日:20160511 授权公告日:20190101 许可种类:普通许可 备案日期:20191224 申请日:20160115

    专利实施许可合同备案的生效、变更及注销

  • 2019-01-01

    授权

    授权

  • 2016-06-08

    实质审查的生效 IPC(主分类):G06K9/00 申请日:20160115

    实质审查的生效

  • 2016-05-11

    公开

    公开

说明书

技术领域

本发明属于智能视频监控领域,特别涉及一种无重叠视域下的行人再识别方法。

背景技术

行人再识别是智能视频监控领域最具有挑战性的问题之一,随着视频监控技术的广泛应用,大量的监控摄像头被应用于各种公共场所,在对视频进行监控的时候,视频中的行人是我们重点监控的对象之一,由于摄像机监控区域的局限性,无重叠视域的摄像机联合监控在监控系统中的应用越来越广泛。在无重叠视域下,目标行人的再识别是一种将曾经在监控网络中出现过的目标行人在其他摄像机的场景内出现时再次识别出来的技术;在对行人进行再识别匹配的时候往往我们很难仅根据行人的某一张图片信息或者某一种单一的特征信息来进行很好的匹配,同时单一的一种度量准则也很难对不同的特征达到相同的匹配基准,因此如何有效的利用行人图片的序列信息以及提出一种综合鲁棒的表示特征和相应的度量准则是解决行人再识别的关键。

发明内容

本发明的目的在于提出了一种无重叠视域下行人再识别的方法,通过对行人序列的采集以及行人的精确提取与分割从而减小外界干扰信息的影响,最终构建一个行人的分块多通道稀疏字典,计算待识别行人的重构误差并进行融合判决,该方法能够很好的提高行人目标再识别的可靠性。

为了实现上述目的,本发明采用以下技术方案:一种无重叠视域下的行人再识别方法,包括步骤如下:

步骤A、监控视域中行人目标的检测与跟踪;

步骤B、精确行人区域的提取与行人模型的分割;

步骤C、行人序列上下半身HSV三通道稀疏字典的构建;

步骤D、另一监控视域中行人目标的检测分割预处理;

步骤E、稀疏重构融合判决,得出行人目标识别相似度。

所述步骤A包括以下步骤:对监控视域下的视频采用基于HOG+SVM的行人检测算法进行行人检测,获取行人的最小矩形框i*j,然后采用TLD算法对目标行人进行跟踪,保存每一帧跟踪结果信息。

所述步骤B中包括以下步骤:步骤B-1,结合行人跟踪结果框坐标信息以及视频帧信息,采用GrabCut算法对视频序列的每一个行人区域进行前景分割处理,分割出精确的行人前景区域并归一化到统一大小i*j保存;

步骤B-2,将精确的行人前景采用固定的行人模型进行分割,将行人分割为上半身和下半身并保存分割后的行人上下半身序列,分割比例为7:5。

所述步骤C中包括以下步骤:利用步骤B-2中分割出来的行人目标的上半身以及下半身序列,将其颜色从RGB颜色通道转化为HSV颜色通道,然后将每一个通道颜色分量合成一维特征矢量,之后利用提取到的特征矢量分别构建上下半身的H、S和V三通道的稀疏字典,分别为上半身字典Dh1、Ds1和Dv1以及下半身字典Dh2,Ds2和Dv2

所述步骤D中包括以下步骤:利用步骤A中行人检测方法对行人目标进行检测并将检测到的行人矩形框归一化到i*j大小,然后再利用步骤B中所提到的行人分割方法对行人区域进行精确的提取和行人模型的分割,从而精确提取出行人的上下半身序列,将待识别行人目标的上下半身序列从RGB颜色通道转换为HSV颜色通道。

所述步骤中E包括以下步骤:对步骤D处理过后的行人上下半身序列分别提取其HSV三通道值,每一个颜色分量合成一维特征矢量,然后计算其在对应稀疏字典Dh1、Ds1、Dv1、Dh2、Ds2、Dv2下的重误差δh1、δs1、δv1、δh2、δs2、δv2,之后对六个字典的重构差赋予不同的权重并进行融合判决,融合原则为δ=0.65*(δh1s1v1)+0.35*(δh1s1v1),从而由总的重构误差δ判决待识别行人目标的识别相似度。

总体而言,通过本发明所构思的以上技术方案与现有技术相比,能够取得以下有益效果:(1)本发明能够有效的利用到行人目标的图片序列信息,同时大大减小了外界信息对行人目标信息的干扰以及行人角度、姿态变化对识别所带来的影响,能够使提取到的特征信息更加鲁棒可靠;(2)本发明能够很好的利用行人HSV颜色通道信息,构建行人分块多通道稀疏字典,计算待识别目标分块后的多通道重构误差,最后通过分别赋予上下半身字典不同权重比例进行融合判决从而大大提高了待识别行人的识别准确度。

附图说明

图1是本发明的无重叠视域下的行人再识别方法的流程图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图实施例对本发明作进一步的详细说明。

本发明的流程图如图1所示,以下为一个具体的实施例,其具体步骤依次为:

步骤A:监控视域中行人目标的检测与跟踪:

首先采用HOG+SVM的行人检测算法对视域下的行人目标进行行人检测,获取行人目标的最小矩形框i*j,然后将检测到的行人目标框作为TLD算法的初始跟踪框对行人目标进行跟踪,同时保存当前帧跟踪坐标信息(x1,y1,x2,y2),其中i*j为矩形框的大小,(x1,y1),(x2,y2)分别为当前跟踪结果矩形框左上角和右下角的坐标。

步骤B:精确行人区域的提取与行人模型的分割:

在对行人目标进行跟踪的同时结合跟踪算法的跟踪结果坐标,采用GrabCut算法对当前视频帧的行人区域进行前景分割处理,从而分割出不包含背景信息的行人目标,保存分割出的行人目标矩形框,同时将图片大小归一化为统一大小i*j,依次保存为Img1,Img2,Img3,…,Imgn,直至目标跟踪消失;然后将图片按照行人分割模型进行分割,上下半身分割比为7:5,从而分割成上半身和下半身,依次保存为Img1上,Img1下,Img2上,Img2上,…,Imgn上,Imgn下序列集,其中Img1上,Img1下,Img2上,Img2上,…,Imgn上,Imgn下,分别为对应图片Img1,Img2,Img3,…,Imgn分割出来的上半身和下半身。

步骤C、行人上下半身序列HSV三通道稀疏字典的构建:

首先将保存的行人上下半身序列从RGB颜色空间转换到HSV颜色空间,其中把色调H通道分成16份,饱和度S通道和亮度V通道分别分成8份,根据色彩的不同范围对图片序列进行量化;

对于上半身序列Img1上,Img2上,Img3上,…,Imgn上随机可重复选取12张图片,提取每张图片的H分量,S分量和V分量,每一个颜色分量合成一维特征矢量,分别为Xh,Xs和Xv。最后分别利用提取到的上半身序列的所有H分量特征矢量,S分量特征矢量和V分量矢量分别构建上半身的H分量,S分量和V分量的稀疏字典Dh1,Ds1和Dv1

利用提取上半身序列相同的方法提取下半身的H分量,S分量和V分量的稀疏字典Dh2,Ds2和Ds2。从而一个行人目标将会用六个稀疏字典Dh1,Ds1,Dv1,Dh2,Ds2,Dv2进行描述。

步骤D、另一监控视域中行人目标的检测分割预处理:

在另一监控视域中利用步骤A中相同的行人检测方法对行人目标进行检测并归一化到i*j大小,然后利用步骤B中所提到相同的行人分割方法对待测行人进行精确行人区域提取和行人模型的分割,同时利用步骤C中所采用的H,S,V分量的提取方法,分别提取待识别行人的上下半身H分量,S分量和V分量,结果为Yh上,Ys上,Yv上,Yh下,Ys下,Yv下

步骤E、稀疏重构融合判决,得出行人目标识别相似度:

将提取到的待识别目标的Yh上,Ys上,Yv上,Yh下,Ys下,Yv下六个特征矢量分别利用对应的稀疏字典Dh1,Ds1,Dv1,Dh2,Ds2,Dv2进行稀疏表示,求解出稀疏表示系数α:

>argminα||Yi-Diα||22+λ||α||1>

其中Di表示稀疏字典,α表示特征Yi对应于字典Di的稀疏编码系数,λ是正则化参数,其取值为(0,+∞);从而得到Yh上,Ys上,Yv上,Yh下,Ys下,Yv下对应于字典Dh1,Ds1,Dv1,Dh2,Ds2,Dv2的稀疏编码系数αh上,αs上,αv上,αh下,αs下,αv下;最后计算分别对应的稀疏字典上的重构误差结果分别为δh1,δs1,δv1,δh2,δs2,δv2,将所得到的六个重构误差结果赋予相应的权重融合相加δ=0.65*(δh1s1v1)+0.35*(δh1s1v1),从而由重构误差δ的大小判决行人再识别的相似度。

以上所述,仅是本发明的较佳实施例而已,并非对本发明做任何形式的限制。凡是依据本发明的技术和方法实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明的技术和方法方案的范围内。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号