人工知能学会研究会資料 言語・音声理解と対話処理研究会
Online ISSN : 2436-4576
Print ISSN : 0918-5682
96回 (2022/12)
会議情報

対話行為予測とエントレインメント予測に基づいたマルチモーダル対話システム
金崎 翔大渡邉 寛大河野 誠也湯口 彰重桂井 麻里衣吉野 幸一郎
著者情報
会議録・要旨集 フリー

p. 20-

詳細
抄録

本論文は第5回対話システムライブコンペティションのオープントラックに提出したマルチモーダル対話システムについて述べる。本システムは応答生成モジュールとそれに続く、ふるまい制御モジュールから構成される。応答生成モジュールは、Transformer encoder-decoderモデルに基づいており、対話行為ラベルを付与した対話履歴から対話行為ラベル付き応答候補をend-to-endに生成し、エントレインメントと呼ばれる対話現象を考慮したリランキングを適用することにより最終的なシステム応答を決定する。ふるまい制御モジュールでは応答生成モジュールが生成した応答の対話行為ラベルと自動推定されたシステム応答の感情ラベルからCGエージェントの表情、身振り・手振りの動作をルールに基づいて制御する。本論文では、コンペティションの予選ラウンドにおける本システムの評価結果についても述べる。

著者関連情報
© 2022 人工知能学会
前の記事 次の記事
feedback
Top