How AI Ideas Affect the Creativity, Diversity, and Evolution of Human Ideas: Evidence From a Large, Dynamic Experiment

要約

大規模な言語モデルの出力にさらされる機会が急速に増加しています。
AI が生成したアイデアを見ると、人間のアイデアにどのような影響が及ぶでしょうか?
私たちは、参加者が ChatGPT または以前の実験参加者からの創造的なアイデアを見て、自分のアイデアをブレインストーミングする実験 (40 か国以上、800 人以上の参加者) を実施しました。
AI によって生成されたサンプルの数 (なし、低暴露、または高暴露)、およびサンプルに「AI」(開示) のラベルが付けられているかどうかを変化させました。
私たちの動的な実験デザイン – ある実験条件における以前の参加者からのアイデアが、同じ実験条件における将来の参加者への刺激として使用される – は、文化創造の相互依存プロセスを模倣しており、創造的なアイデアは以前のアイデアに基づいて構築されます。
したがって、LLM を「培養ループに」入れることによる複合効果を捉えています。
AI への露出が高い (AI への露出が低い) 場合、個々のアイデアの創造性に影響はありませんが、集合的なアイデアの多様性の平均量と変化率は増加することがわかりました。
AI はアイデアをより良くするのではなく、異なるものにしました。
開示による主な影響はありませんでした。
また、自己申告した創造的な人々は、アイデアが AI からのものであると知っても影響を受けにくく、参加者はタスクが難しい場合には、意図的に AI のアイデアを採用する可能性が高いこともわかりました。
私たちの調査結果は、AI のアイデアを社会に導入すると、集団の多様性は高まるかもしれないが、個人の創造性は高まるわけではないことを示唆しています。

要約(オリジナル)

Exposure to large language model output is rapidly increasing. How will seeing AI-generated ideas affect human ideas? We conducted an experiment (800+ participants, 40+ countries) where participants viewed creative ideas that were from ChatGPT or prior experimental participants and then brainstormed their own idea. We varied the number of AI-generated examples (none, low, or high exposure) and if the examples were labeled as ‘AI’ (disclosure). Our dynamic experiment design — ideas from prior participants in an experimental condition are used as stimuli for future participants in the same experimental condition — mimics the interdependent process of cultural creation: creative ideas are built upon prior ideas. Hence, we capture the compounding effects of having LLMs ‘in the culture loop’. We find that high AI exposure (but not low AI exposure) did not affect the creativity of individual ideas but did increase the average amount and rate of change of collective idea diversity. AI made ideas different, not better. There were no main effects of disclosure. We also found that self-reported creative people were less influenced by knowing an idea was from AI, and that participants were more likely to knowingly adopt AI ideas when the task was difficult. Our findings suggest that introducing AI ideas into society may increase collective diversity but not individual creativity.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google