大规模连续中国手语数据集的创建与分析

摘要

绝大多数健听人不懂手语导致听障人在找工作、就医、法律咨询等各生活、工作领域中遇到了极大的沟通障碍,而手语翻译员需要提前预约,成本也非常高,所以很多科研工作者都开始利用机器学习来开发手语自动翻译器,但其中的大部分研究都因为受到了数据集规模和质量的影响而效果不佳.为解决上述矛盾和问题,创建了目前全球最大的中国连续手语数据集,并使用了考虑身体关节的位置、面部表情及手指关节的端到端的深度学习模型进行有效训练.结论突显了现代深度学习技术在识别复杂手语方面的巨大优势,针对较小子集的BLEU-4已达到30.8.