基于骨骼点检测与跟踪的手势识别方法

摘要

本发明公开了一种基于骨骼点检测与跟踪的手势识别方法，利用骨骼点检测模型检测所有工厂人员的骨骼点，得到对应检测框，利用对象跟踪算法统计工厂人员，并生成对应的跟踪器，同时判断所述检测框与所述跟踪器内存储的跟踪框的匹配度，并再次利用所述对象跟踪算法统计所述工厂人员的被跟踪情况，然后将所述图像输入到CNN模型中依次经过4组卷积层进行特征提取后，对所述跟踪框利用ROI Align得到设定尺寸的区域特征图，再经过2组全连接层得到特征向量，然后依次经过LSTM模型中的舍弃门、添加门和输出门进行训练后，输出设定特征向量，并根据所述设定特征向量，由SoftMax分类器预测是否存在做手势的过程，准确检测工厂人员是否做出正确完整连贯的倒车手势。