フィードバック機能を備えた指文字練習システムの試作

摘要

We developed training system for learning finger spellings with feedback functions. Our system can classify 41 kinds of finger spellings with high accuracy in real-time. It has useful feedback function, detect slight difference between collect and false shape and return direction. Recognition of hands shape with high accuracy is realized by applying KOMSM to sequential depth. The effectiveness of our system is demonstrated through several experimental results.%本稿では，試作した指文字練習システムの主要な機能およびシステム構成について述べる.試作システムは41種類の指文字を対象にして，ユーザーの提示した指文字をリアルタイムで高精度に識別する.さらに指の開き方のような微妙な間違いを検出し，正解手形状に近付けるために，どの部分を修正すべきかを指示する誤りフィードバック機能も付加されている.システムの要である手形状の高精度識別は，連続的に入力される距離画像列に対して,画像セットベースの識別で実績のあるカーネル直交相互部分空間法(KOMSM)を適用することで実現した.システムの基本動作を確認するとともに，識別率を評価することでシステムの有効性を検証した.