Is Self-knowledge and Action Consistent or Not: Investigating Large Language Model’s Personality

要約

この研究では、大規模言語モデル (LLM) の人間に似た性格特性を捕捉する際の従来の性格アンケートの妥当性を詳しく調べます。
私たちの目的は、LLM が所有していると主張する性格特性と、現実世界のシナリオで実証された傾向との一致性を評価することです。
観察された人間の反応パターンに対して LLM の出力を広範に検査することにより、LLM における自己知識と行動の間の分離を理解することを目指しています。

要約(オリジナル)

In this study, we delve into the validity of conventional personality questionnaires in capturing the human-like personality traits of Large Language Models (LLMs). Our objective is to assess the congruence between the personality traits LLMs claim to possess and their demonstrated tendencies in real-world scenarios. By conducting an extensive examination of LLM outputs against observed human response patterns, we aim to understand the disjunction between self-knowledge and action in LLMs.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google