主催: 一般社団法人 人工知能学会
会議名: 2024年度人工知能学会全国大会(第38回)
回次: 38
開催地: アクトシティ浜松+オンライン
開催日: 2024/05/28 - 2024/05/31
大規模言語モデル(LLM)の数学的推論能力は,自然言語のみでは高い性能を発揮しないが,コード生成や外部ツールを統合することで大幅に向上する.自然言語のみで数学的推論能力を強化すれば,全体的なパフォーマンスが向上することが期待されるが,そのための方法はまだ確立されていない.LLMは主に英語を対象としているが,他の言語でも活用することでタスクのパフォーマンスが向上する例が確認されており,数学的推論能力に関しても改善の可能性が示唆されるが,まだ明らかになっていない.本研究は,言語がLLMの数学的推論能力に与える影響を明らかにすることを目的して,代表的なLLMであるGPTを利用し,5つの異なる言語で数学的課題における精度を比較した.英語以外の言語で実施されたいくつかの課題は,英語よりも精度が高いことが明らかになった.本研究は,LLM の数学的推論能力と多言語能力に関する新しい知見を提供できることが期待される.