Conformal Risk Control

要約

【タイトル】Conformal Risk Control

【要約】
– コンフォーマル予測を一定の単調減少する損失関数の期待値の制御に拡張する。
– このアルゴリズムは、分割コンフォーマル予測のカバー範囲保証を一般化する。
– コンフォーマル予測同様、コンフォーマルリスク制御手続きは、 $\mathcal{O}(1/n)$ ファクターまで正確です。
– コンピュータビジョンと自然言語処理からの実際の例を示して、偽陰性率、グラフ距離、およびトークンレベルのF1スコアを制限するためにアルゴリズムを使用する方法を示す。

要約(オリジナル)

We extend conformal prediction to control the expected value of any monotone loss function. The algorithm generalizes split conformal prediction together with its coverage guarantee. Like conformal prediction, the conformal risk control procedure is tight up to an $\mathcal{O}(1/n)$ factor. Worked examples from computer vision and natural language processing demonstrate the usage of our algorithm to bound the false negative rate, graph distance, and token-level F1-score.

arxiv情報

提供元, 利用サービス

arxiv.jp, OpenAI