Learning from Impairment: Leveraging Insights from Clinical Linguistics in Language Modelling Research

要約

このポジションペーパーでは、言語障害の研究とその臨床治療からの洞察を統合して、人間からインスピレーションを得た学習戦略と言語モデル（LM）の評価フレームワークを開発する可能性を調査します。
私たちは、失語症治療における言語スキルの回復と一般化を促進することを目的とした、神経言語学、特に失語学に由来するいくつかの影響力のある言語を動機としたトレーニングアプローチの根底にある理論的基礎を、構文領域を対象としたトレーニングアプローチに主に焦点を当てて検証します。
私たちは、これらの洞察が、特に複雑な構文現象の処理において、LM の厳密な評価の設計にどのように情報を提供できるか、また、より持続可能で認知的に妥当な自然言語処理を作成する取り組みと連携して、人間のような学習戦略を開発することへの影響を強調します。
(NLP) モデル。

要約(オリジナル)

This position paper investigates the potential of integrating insights from language impairment research and its clinical treatment to develop human-inspired learning strategies and evaluation frameworks for language models (LMs). We inspect the theoretical underpinnings underlying some influential linguistically motivated training approaches derived from neurolinguistics and, particularly, aphasiology, aimed at enhancing the recovery and generalization of linguistic skills in aphasia treatment, with a primary focus on those targeting the syntactic domain. We highlight how these insights can inform the design of rigorous assessments for LMs, specifically in their handling of complex syntactic phenomena, as well as their implications for developing human-like learning strategies, aligning with efforts to create more sustainable and cognitively plausible natural language processing (NLP) models.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google