一种体育视频中对参赛运动员进行多人脸跟踪的方法

摘要

本发明公开了一种体育视频中对参赛运动员进行多人脸跟踪的方法，包括以下步骤：预训练针对人脸识别的卷积神经网络；对输入视频进行镜头分割，选出所有近景镜头片段；对近景镜头中每幅图像进行人脸检测，得到人脸检测响应；关联人脸检测响应形成轨迹片段；根据轨迹片段之间的时空信息限制，生成训练样本；以获得的训练样本作为输入，使用Siamese或Triplet网络对预训练的卷积神经网络进行微调；使用微调后的卷积神经网络，提取每幅人脸图像的特征；分层关联所有轨迹片段，生成人脸运动轨迹。本发明所述方法，从待跟踪视频中在线收集训练样本，对预训练的卷积神经网络进行微调，从而在线学习更具判别性的人脸特征，进而使用该特征进行更加有效地多人脸跟踪。