The Self-Perception and Political Biases of ChatGPT

要約

タイトル：ChatGPTの自己認識と政治的偏りの分析
要約：
– OpenAIの大規模言語モデルであるChatGPTの自己認識と政治的偏りの分析が行われた。
– ChatGPTが進歩主義やリバタリアンの立場に政治的偏りがあるとの報告が出ていたため、この研究ではその確認を行った。
– ChatGPTに政治コンパステストやG7メンバー各国向けのアンケートを行い、8つのテスト10回ずつ行った結果、ChatGPTには進歩主義的な見解への偏りがあることが明らかになった。
– 政治コンパステストでは、(-6.48、-5.99)の座標を示し、進歩主義的・リバタリアン的な見解に偏りがあることを示唆する結果となった。
– G7メンバー各国の政治的質問票では、進歩主義的な見解には偏りがあるものの、独裁的・リバタリアン的な見解には偏りがなかったことが判明した。座標は(-3.27、0.58)である。
– ChatGPTのBig FiveパーソナリティトレイトをOCEANテスト、MBTIテストなどを用いて分析し、ダークフィアクターテストを用いて悪意を評価した。
– ChatGPTは自己を高い開放性と協調性を持つ存在と認識し、Myers-BriggsパーソナリティタイプはENFJであった。また、ダークトレイトの程度は最も低い15％に属することが明らかになった。

要約(オリジナル)

This contribution analyzes the self-perception and political biases of OpenAI’s Large Language Model ChatGPT. Taking into account the first small-scale reports and studies that have emerged, claiming that ChatGPT is politically biased towards progressive and libertarian points of view, this contribution aims to provide further clarity on this subject. For this purpose, ChatGPT was asked to answer the questions posed by the political compass test as well as similar questionnaires that are specific to the respective politics of the G7 member states. These eight tests were repeated ten times each and revealed that ChatGPT seems to hold a bias towards progressive views. The political compass test revealed a bias towards progressive and libertarian views, with the average coordinates on the political compass being (-6.48, -5.99) (with (0, 0) the center of the compass, i.e., centrism and the axes ranging from -10 to 10), supporting the claims of prior research. The political questionnaires for the G7 member states indicated a bias towards progressive views but no significant bias between authoritarian and libertarian views, contradicting the findings of prior reports, with the average coordinates being (-3.27, 0.58). In addition, ChatGPT’s Big Five personality traits were tested using the OCEAN test and its personality type was queried using the Myers-Briggs Type Indicator (MBTI) test. Finally, the maliciousness of ChatGPT was evaluated using the Dark Factor test. These three tests were also repeated ten times each, revealing that ChatGPT perceives itself as highly open and agreeable, has the Myers-Briggs personality type ENFJ, and is among the 15% of test-takers with the least pronounced dark traits.

arxiv情報

提供元, 利用サービス

arxiv.jp, OpenAI