On the Computation of BD-Rate over a Set of Videos for Fair Assessment of Performance of Learned Video Codecs

要約

Bjntegaard デルタ (BD) 測定は、さまざまなコーデック間のレート歪み (RD) パフォーマンスの変動を評価および定量化するために広く使用されています。
多くの研究者が、さまざまなコーデックのデータセット内の複数のビデオの平均 BD 値を報告しています。
私たちは、学習済みビデオ圧縮コミュニティにおける、複数のビデオの平均 RD 曲線に基づいてデータセットの平均 BD 値を計算する現在の慣行は、誤解を招く結論につながる可能性があると主張します。
線形 RD 曲線の単純化したケースの分析と、最近学習した 2 つのビデオ コーデックを使用した実験結果の両方によって、特に異なるコーデックの動作ビットレート範囲が異なる場合、RD 曲線を平均化すると 1 つのビデオが平均 BD 値に不均衡な影響を与える可能性があることを示します。
まさに一致します。
代わりに、従来のビデオ圧縮コミュニティで一般的に行われているように、ビデオごとに BD 測定値を計算し、ビデオ全体で個々の BD 値を平均して、学習されたビデオ コーデックの公正な比較を提供することを推奨します。
私たちの実験結果は、最近学習した 2 つのビデオ コーデックの比較が、平均 BD 測定値の評価方法に影響されることを示しています。

要約(オリジナル)

The Bj{\o}ntegaard Delta (BD) measure is widely employed to evaluate and quantify the variations in the rate-distortion(RD) performance across different codecs. Many researchers report the average BD value over multiple videos within a dataset for different codecs. We claim that the current practice in the learned video compression community of computing the average BD value over a dataset based on the average RD curve of multiple videos can lead to misleading conclusions. We show both by analysis of a simplistic case of linear RD curves and experimental results with two recent learned video codecs that averaging RD curves can lead to a single video to disproportionately influence the average BD value especially when the operating bitrate range of different codecs do not exactly match. Instead, we advocate for calculating the BD measure per-video basis, as commonly done by the traditional video compression community, followed by averaging the individual BD values over videos, to provide a fair comparison of learned video codecs. Our experimental results demonstrate that the comparison of two recent learned video codecs is affected by how we evaluate the average BD measure.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google