生成的言語創発モデルに基づく画像キャプション生成と画像生成のアライメント学習

抄録

本研究では，生成的言語創発モデルに基づいた，言語の変容を伴う画像キャプションと画像生成のアライメント学習手法を提案する．本研究は画像キャプションモデルと画像生成モデルのアライメント学習を，生成モデルに基づく自己教師あり学習の手法に拡張したものである．本研究がユーザーの意図に沿った画像生成の実現や，テキストによる画像編集の質の向上に貢献することを目指す．