CG アバターを利用するライブストリーミングを想定した効果音付与システムの試作

抄録

本研究では CG アバターを利用したライブストリーミングを想定し，動作に反応してリアルタイムに効果音を再生するツールのプロトタイプ制作を実施した．3 本の VTuber のライブストリーミングについて動作に着目して分析し，7 種類の繰り返される動作や特徴的な動作を確認した．その 1 つである小さく左手を振る動作についての分析によって，この動作は z 軸回転が一定周期で発生し，角速度はおおよそ 0 を中心に周期的に変化していることが確認された．結果をもとに動作検出に応じた効果音再生システムのプロトタイプを VIVE Pro 2 を使用して制作した．作成したプロトタイプによって，動作に伴った効果の再生を確認した．また，HoloLens 2 へ一部機能の移植を実施し考察した．