[5F2-GS-10m] AI応用：LLM適応・評価・アラインメント

12:00 〜 12:15

[5F2-GS-10m-01] 個別化と分布カバレッジによる LLM を用いた仮想個人の定量評価

〇熊谷 雄介¹ (1. 株式会社博報堂DYホールディングス)

キーワード：

大規模言語モデル、ペルソナ、仮想個人、シリコンサンプリング

LLM に人格や属性などのペルソナを設定して構築する仮想個人は社会シミュレーションや半構造化インタビューなどの様々な応用を持つ．本研究では，これまで既存研究が取り組んできた「仮想個人が特定のペルソナを模倣しているか」だけではなく，「実際の人間の多様性を仮想個人はカバーできているか」の観点で定量評価を行う．実データを用いた実験の結果，（1）LLM に対するペルソナの設定は，同属性の人間の回答に近づける効果が限定的である，（2）仮想個人の回答集合は人間が持つ多様な回答をカバーしきれない，の2つが明らかになった．