UKP-SQuARE: An Interactive Tool for Teaching Question Answering

要約

質問応答（QA）の急激な成長により、自然言語処理（NLP）のコースでは欠かせないトピックとなりました。さらに、この急激な成長から生まれたQAの幅広さは、情報検索、説明可能性、敵対的攻撃など、関連するNLPトピックを教えるのに理想的なシナリオとなっている。本論文では、QA教育のためのプラットフォームとしてUKP-SQuAREを紹介します。このプラットフォームは、学生が様々なQAモデルを実行、比較、分析できるインタラクティブな環境を提供し、一般的な動作、説明可能性、堅牢性などの異なる観点から分析することができます。そのため、学生は授業中に様々なQA技術を実際に体験することができます。このように、従来の講義だけに頼るのではなく、インタラクティブな探索や実験、実践的な課題を通して、学生が主体的に理論的な概念を学び、問題解決能力を身につける、学習者中心のQA教育を提案しています。UKP-SQuAREの教育現場での有効性を評価するため、大学院のNLPコースで採用し、コース終了後に学生を対象にアンケートを実施しました。その結果、UKP-SQuareの有効性が確認され、今後、より多くの学生への導入が期待されます。

要約(オリジナル)

The exponential growth of question answering (QA) has made it an indispensable topic in any Natural Language Processing (NLP) course. Additionally, the breadth of QA derived from this exponential growth makes it an ideal scenario for teaching related NLP topics such as information retrieval, explainability, and adversarial attacks among others. In this paper, we introduce UKP-SQuARE as a platform for QA education. This platform provides an interactive environment where students can run, compare, and analyze various QA models from different perspectives, such as general behavior, explainability, and robustness. Therefore, students can get a first-hand experience in different QA techniques during the class. Thanks to this, we propose a learner-centered approach for QA education in which students proactively learn theoretical concepts and acquire problem-solving skills through interactive exploration, experimentation, and practical assignments, rather than solely relying on traditional lectures. To evaluate the effectiveness of UKP-SQuARE in teaching scenarios, we adopted it in a postgraduate NLP course and surveyed the students after the course. Their positive feedback shows the platform’s effectiveness in their course and invites a wider adoption.

arxiv情報

提供元, 利用サービス

arxiv.jp, DeepL