Let Guidelines Guide You: A Prescriptive Guideline-Centered Data Annotation Methodology

要約

各データ サンプルに関連付けられたアノテーション ガイドラインのレポートに焦点を当てた新しいデータ アノテーション手法である、ガイドライン中心のアノテーション プロセスを紹介します。
標準的な規範的なアノテーション プロセスの 3 つの主な制限を特定し、ガイドライン中心の方法論がアノテーション プロセスでの情報の損失を減らし、ガイドラインの順守を確実にすることでどのようにそれらを克服するかを説明します。
さらに、Guideline-Centered によって、人による単一のアノテーション プロセスを犠牲にして、複数のタスクにわたってアノテーション付きデータの再利用がどのように可能になるかについて説明します。

要約(オリジナル)

We introduce the Guideline-Centered annotation process, a novel data annotation methodology focused on reporting the annotation guidelines associated with each data sample. We identify three main limitations of the standard prescriptive annotation process and describe how the Guideline-Centered methodology overcomes them by reducing the loss of information in the annotation process and ensuring adherence to guidelines. Additionally, we discuss how the Guideline-Centered enables the reuse of annotated data across multiple tasks at the cost of a single human-annotation process.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google