ChatGPTest: opportunities and cautionary tales of utilizing AI for questionnaire pretesting

要約

生成人工知能の急速な進歩により、調査アンケートの設計や評価など、研究のさまざまな側面を強化するための新しい道が開かれました。
ただし、最近の先駆的なアプリケーションでは、アンケートの事前テストが考慮されていません。
この記事では、特に調査設計の初期段階で、調査アンケートを事前テストするための便利なツールとしての GPT モデルの使用について説明します。
この記事では 2 つのアプリケーションを例に挙げて、人による事前テストの前の追加段階として GPT フィードバックを組み込むことで、連続する反復を削減できる可能性があることを提案しています。
この記事では、AI が生成したフィードバックを解釈して実装する際に、研究者の判断が不可欠な役割を果たすことも強調しています。

要約(オリジナル)

The rapid advancements in generative artificial intelligence have opened up new avenues for enhancing various aspects of research, including the design and evaluation of survey questionnaires. However, the recent pioneering applications have not considered questionnaire pretesting. This article explores the use of GPT models as a useful tool for pretesting survey questionnaires, particularly in the early stages of survey design. Illustrated with two applications, the article suggests incorporating GPT feedback as an additional stage before human pretesting, potentially reducing successive iterations. The article also emphasizes the indispensable role of researchers’ judgment in interpreting and implementing AI-generated feedback.

arxiv情報

著者 Francisco Olivos,Minhui Liu
発行日 2024-05-10 09:01:14+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.AI, cs.CY パーマリンク