‘It’s not like Jarvis, but it’s pretty close!’ — Examining ChatGPT’s Usage among Undergraduate Students in Computer Science

要約

ChatGPT や Google Bard などの大規模言語モデル (LLM) は、学術コミュニティで大きな注目を集めています。
これまでの研究では、プログラミング演習やソリューションの生成など、さまざまなアプリケーションに対してこれらの LLM が評価されてきました。
ただし、これらの評価は主に講師や研究者によって行われており、学生によるLLMの実際の使用状況は考慮されていません。
この研究では、OpenAI がリリースした人気の LLM である ChatGPT をコンピュータ サイエンスの学部生がどのように利用しているかを包括的に理解するために、学生第一のアプローチを採用しています。
私たちは学生アンケートとインタビューを組み合わせて、ChatGPT に関連する利点、課題、提案された改善点についての貴重な洞察を取得します。
私たちの調査結果は、学生の大多数 (57% 以上) が、授業関連のタスクの補助として ChatGPT を採用することに対して、説得力のある前向きな見通しを持っていることを示唆しています。
しかし、私たちの調査では、ChatGPT が学生に長期的に受け入れられるためには解決しなければならないさまざまな課題も浮き彫りにしています。
この調査の結果はより広範な意味を持ち、他の LLM やコンピューティング教育における LLM の役割にも適用できる可能性があります。

要約(オリジナル)

Large language models (LLMs) such as ChatGPT and Google Bard have garnered significant attention in the academic community. Previous research has evaluated these LLMs for various applications such as generating programming exercises and solutions. However, these evaluations have predominantly been conducted by instructors and researchers, not considering the actual usage of LLMs by students. This study adopts a student-first approach to comprehensively understand how undergraduate computer science students utilize ChatGPT, a popular LLM, released by OpenAI. We employ a combination of student surveys and interviews to obtain valuable insights into the benefits, challenges, and suggested improvements related to ChatGPT. Our findings suggest that a majority of students (over 57%) have a convincingly positive outlook towards adopting ChatGPT as an aid in coursework-related tasks. However, our research also highlights various challenges that must be resolved for long-term acceptance of ChatGPT amongst students. The findings from this investigation have broader implications and may be applicable to other LLMs and their role in computing education.

arxiv情報

著者 Ishika Joshi,Ritvik Budhiraja,Harshal D Akolekar,Jagat Sesh Challa,Dhruv Kumar
発行日 2024-01-05 15:47:03+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.AI, cs.HC パーマリンク