Performance Comparison of Large Language Models on VNHSGE English Dataset: OpenAI ChatGPT, Microsoft Bing Chat, and Google Bard

要約

このペーパーでは、VNHSGE 英語データセットにおける 3 つの大規模言語モデル (LLM)、つまり OpenAI ChatGPT、Microsoft Bing Chat、Google Bard のパフォーマンスの比較を示します。
結果は、BingChat が ChatGPT や Bard よりも優れていることを示しています。
したがって、ChatGPT はベトナムではまだ正式に利用可能ではありませんが、BingChat と Bard は ChatGPT を置き換えることができます。
この結果は、ChatGPT、Bing Chat、および Bard が英語能力においてベトナム人学生を上回っていることも示しています。
この研究の結果は、英語教育における LLM の可能性の理解に貢献します。
ChatGPT、Bing Chat、および Bard の顕著なパフォーマンスは、高校レベルでの英語の教育および学習のための効果的なツールとしての可能性を示しています。

要約(オリジナル)

This paper presents a performance comparison of three large language models (LLMs), namely OpenAI ChatGPT, Microsoft Bing Chat, and Google Bard, on the VNHSGE English dataset. The results show that BingChat is better than ChatGPT and Bard. Therefore, BingChat and Bard can replace ChatGPT while ChatGPT is not yet officially available in Vietnam. The results also indicate that ChatGPT, Bing Chat, and Bard outperform Vietnamese students in English language proficiency. The findings of this study contribute to the understanding of the potential of LLMs in English language education. The remarkable performance of ChatGPT, Bing Chat, and Bard demonstrates their potential as effective tools for teaching and learning English at the high school level.

arxiv情報

著者 Xuan-Quy Dao
発行日 2023-07-07 00:43:00+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CL, cs.HC パーマリンク