Nonverbal Immediacy Analysis in Education: A Multimodal Computational Model

要約

この論文では、教育現場における非言語的社会行動を分析するための新しい計算アプローチを紹介します。
このモデルは、顔の表情、ジェスチャーの強度、空間ダイナミクスなどのマルチモーダルな行動キューを統合し、RGB 教室ビデオから教師の非言語即時性 (NVI) を評価します。
モデルのトレーニングと検証のために、ドイツの教室からの 400 の 30 秒ビデオ セグメントのデータセットが構築されました。
人間の評価の中央値とのジェスチャ強度リグレッサーの相関関係は 0.84、知覚距離リグレッサーの相関関係は 0.55、NVI モデルの相関関係は 0.44 でした。
このモデルは、非言語的行動評価において貴重なサポートを提供し、個々の人間の評価者の精度を近似する可能性を示しています。
アンケートデータと訓練された観察者の評価の両方に対して検証された私たちのモデルは、関連する教育成果と中程度から強い相関関係を示し、効果的な教育行動を反映する有効性を示しています。
この研究は、非言語コミュニケーション行動の客観的評価を前進させ、教育研究に新たな道を開きます。

要約(オリジナル)

This paper introduces a novel computational approach for analyzing nonverbal social behavior in educational settings. Integrating multimodal behavioral cues, including facial expressions, gesture intensity, and spatial dynamics, the model assesses the nonverbal immediacy (NVI) of teachers from RGB classroom videos. A dataset of 400 30-second video segments from German classrooms was constructed for model training and validation. The gesture intensity regressor achieved a correlation of 0.84, the perceived distance regressor 0.55, and the NVI model 0.44 with median human ratings. The model demonstrates the potential to provide a valuable support in nonverbal behavior assessment, approximating the accuracy of individual human raters. Validated against both questionnaire data and trained observer ratings, our models show moderate to strong correlations with relevant educational outcomes, indicating their efficacy in reflecting effective teaching behaviors. This research advances the objective assessment of nonverbal communication behaviors, opening new pathways for educational research.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google