基于单目视觉的手语-唇语转化方法

摘要

本发明涉及一种基于单目视觉的手语‑唇语转化方法，主要包括视频关键帧提取和手势识别两大部分。视频关键帧提取部分包括特征提取、清晰度优化的K‑means聚类、点密度优化三个关键步骤，主要用于消除大量冗余帧，提高手语识别的准确率和效率。对关键帧进行手势识别部分包括网络结构的改进、损失函数的改进、训练技巧的改进三个关键步骤，主要用于改善原始SSD在检测小目标时出现的漏检、误检情况。