マルチモーダル対話コーパスに対する主観的アノテーション結果に関する分析

抄録

対話におけるユーザの主観的印象（例えば，ユーザが対話を楽しんでいる度合）は曖昧である．またこれはアノテータの主観に基づいて付与されるため，複数のアノテータが付与した結果は必ずしも一致しない．本稿では，複数のアノテータによる付与結果を分析したうえで，その付与結果が信頼できる条件を探る．対象にはマルチモーダル対話コーパスHazumiにおける5人の第三者アノテータによる付与結果を用いる．まず，第三者による付与結果と本人による申告との間の一致に関する調査結果を示す．次に，第三者によるアノテーションのばらつきが，ユーザの性格特性の一部と相関するという結果を示す．これにより，対話システムが主観的印象の自動推定結果を利用する際に，ユーザの性格特性を考慮することが有益であるという知見を得た．