要約
AIチャットボットにチューリングテストを実施します。
私たちは、信頼、公平性、リスク回避、協力、\textit{etc.} などの特性を引き出すように設計された一連の古典的な行動ゲームでチャットボットがどのように動作するか、また伝統的な Big-5 心理学にどのように反応するかを調査します。
性格特性を測定する調査。
ChatGPT-4 は、50 か国以上の数万人の被験者からランダムに抽出した人間と統計的に区別できない行動特性および性格特性を示します。
また、チャットボットは、対話から学習しているかのように、以前の経験とコンテキストに基づいて動作を変更し、同じ戦略的状況のさまざまな枠組みに応じて動作を変更します。
彼らの行動は、平均的で様式的な人間の行動とは異なることが多く、その場合、彼らは分布のより利他的で協力的な方向で行動する傾向があります。
私たちは、彼らが自分自身とパートナーの利益の平均を最大化しているかのように行動すると推定しています。
要約(オリジナル)
We administer a Turing Test to AI Chatbots. We examine how Chatbots behave in a suite of classic behavioral games that are designed to elicit characteristics such as trust, fairness, risk-aversion, cooperation, \textit{etc.}, as well as how they respond to a traditional Big-5 psychological survey that measures personality traits. ChatGPT-4 exhibits behavioral and personality traits that are statistically indistinguishable from a random human from tens of thousands of human subjects from more than 50 countries. Chatbots also modify their behavior based on previous experience and contexts “as if” they were learning from the interactions, and change their behavior in response to different framings of the same strategic situation. Their behaviors are often distinct from average and modal human behaviors, in which case they tend to behave on the more altruistic and cooperative end of the distribution. We estimate that they act as if they are maximizing an average of their own and partner’s payoffs.
arxiv情報
| 著者 | Qiaozhu Mei,Yutong Xie,Walter Yuan,Matthew O. Jackson |
| 発行日 | 2024-01-01 18:43:29+00:00 |
| arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google