Seeing ChatGPT Through Students’ Eyes: An Analysis of TikTok Data

要約

ChatGPT のような高度な大規模言語モデルは、最近、学生の間で大きな注目を集めています。
ただし、学界で ChatGPT に関する議論が盛り上がっている一方で、講師や教師の間では、学生が ChatGPT をどのように使用し、どのように認識しているかについて、より多くの理解が必要です。
このギャップに対処するために、2023 年 2 月に TikTok で利用可能な ChatGPT のコンテンツを分析しました。TikTok は、30 歳未満の個人の間で人気が急成長しているソーシャル メディア プラットフォームです。具体的には、#chatgpt でタグ付けされた英語で最も人気のある 100 の動画のコンテンツを分析しました。
、合計で 2 億 5000 万回以上の視聴回数を獲得しました。
私たちが調査したビデオのほとんどは、エッセイやコードの作成などのタスクでの ChatGPT の使用を促進していました。
さらに、多くのビデオで AI 検出器について説明し、他のツールが ChatGPT 出力を変換してこれらの検出器を欺く方法に焦点を当てています。
これはまた、ChatGPT を講師および教師として教育および採点においてどのように扱うかについての教育者間の議論を反映しています。
ただし、TikTok で分析されたクリップに欠けているのは、無意味またはトレーニング データに忠実でないコンテンツを生成する ChatGPT について説明するビデオです。

要約(オリジナル)

Advanced large language models like ChatGPT have gained considerable attention recently, including among students. However, while the debate on ChatGPT in academia is making waves, more understanding is needed among lecturers and teachers on how students use and perceive ChatGPT. To address this gap, we analyzed the content on ChatGPT available on TikTok in February 2023. TikTok is a rapidly growing social media platform popular among individuals under 30. Specifically, we analyzed the content of the 100 most popular videos in English tagged with #chatgpt, which collectively garnered over 250 million views. Most of the videos we studied promoted the use of ChatGPT for tasks like writing essays or code. In addition, many videos discussed AI detectors, with a focus on how other tools can help to transform ChatGPT output to fool these detectors. This also mirrors the discussion among educators on how to treat ChatGPT as lecturers and teachers in teaching and grading. What is, however, missing from the analyzed clips on TikTok are videos that discuss ChatGPT producing content that is nonsensical or unfaithful to the training data.

arxiv情報

著者 Anna-Carolina Haensch,Sarah Ball,Markus Herklotz,Frauke Kreuter
発行日 2023-03-09 15:46:54+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CL, cs.CY, stat.AP パーマリンク