マルチモーダル情報に基づく重要発言推定モデルを搭載したマルチモーダル議論要約ブラウザの評価

抄録

本研究では，我々が以前提案した重要発言推定モデルを搭載した，マルチモーダルブラウザを提案する．マルチモーダルブラウザに実装した重要発言の可視化機能と，議論で生じた言語・非言語行動を表示する機能により，ユーザに対して議論の優れた理解を支援することを目指した． マルチモーダルブラウザとベースラインブラウザを，議論の理解度と作業時間において比較する実験を実施した．ベースラインブラウザとして，会話参加者の発言のテキストを表示するテキストブラウザと，議論を理解するための従来作業を収録するためのシンプルブラウザを設定した． 結果としてマルチモーダルブラウザは短時間の作業でもシンプルブラウザと同等に議論の正確な理解を支援すること，テキストブラウザと同程度の作業時間でも，テキストブラウザよりも議論の正しい理解を支援することが明らかになった．