日本語発話における機械学習を用いた自動読唇に関する研究

抄録

近年,機械に口唇の動きから発話内容を理解させる機械読唇は,音声と同様に新たなコミュニケーションの一つとして注目されており,現在様々な研究が進められている.しかし.未だに性能は不十分であり,精度は高くない.特に日本語においては,母音の数が少なく,子音での判断が困難であるため,その精度は格段に低い.本研究では, 口唇座標の特徴点の時間変化に着目し, 取得した座標を機械学習を用いて認識させる. また, 子音と母音の特徴点の座標の差分を取ることで, 子音それぞれの特徴を見つけ出し, 日本語発話の自動読唇の精度の向上をはかった．