Is Cognition and Action Consistent or Not: Investigating Large Language Model’s Personality

要約

この研究では、性格アンケートへの回答を通じて人間のような性格特性を公言する際の大規模言語モデル (LLM) の信頼性を調査します。
私たちの目標は、LLM の公言する性格傾向と実際の「行動」の間の一貫性を評価し、これらのモデルが人間のような性格パターンをどの程度エミュレートできるかを調べることです。
確立された人間のベンチマークに対する LLM 出力の包括的な分析を通じて、LLM の認知と行動の相違を理解し、心理理論と測定基準に基づいて観察された結果に対する仮説を提案することを目指しています。

要約(オリジナル)

In this study, we investigate the reliability of Large Language Models (LLMs) in professing human-like personality traits through responses to personality questionnaires. Our goal is to evaluate the consistency between LLMs’ professed personality inclinations and their actual ‘behavior’, examining the extent to which these models can emulate human-like personality patterns. Through a comprehensive analysis of LLM outputs against established human benchmarks, we seek to understand the cognition-action divergence in LLMs and propose hypotheses for the observed results based on psychological theories and metrics.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google