主観的評価による合否決定の事例集作成に向けた試み

抄録

本稿では, 小論文や面接などの主観的評価による合否決定を行う際の注意点を示す事例集作成に向けた試みとして, 実際にあり得る評価方法を単純化した2種類のデザインに関して, 一般化可能性理論を論述式課題の採点データに適用し, 受験者の順位づけの安定性 (信頼性) の違いを検討した。評価方法のデザインが同じでも, 用いる観点や評定者の組合せによって信頼性の値が異なり, 観点と評定者の選択が信頼性にかなり影響することが示された。