口唇動作による英語発話学習の評価法の検討

摘要

これまで我々は音声認識と映像認識を組み合わせたマルチモーダルな音声認識の1つである口唇動作に着目し，発話認識の手法を研究してきた．そして現在，本研究室で開発した口唇特徴点抽出装置を用いて，英語講師の口唇動作と発話学習者の口唇動作を比較して，発話トレーニングを行っている．この研究はプレゼンテーションや面接時の発話改善，外国語学習時の発話能力の改善に役立てることができる．発話学習者にとって，自分がどれだけ進歩したかの評価結果は大きなインセンティブとなる．そこで今回は，これまで行ってきた主観的な評価に加え，客観的な評価法の検討を行った．