3R-INN: How to be climate friendly while consuming/delivering videos?

要約

ビデオの消費には、ライフサイクルのさまざまな段階でかなりの量のエネルギーが必要です。
毎日 10 億時間のビデオが消費され、これが温室効果ガスの排出に大きく貢献しています。
したがって、ユーザー側のエクスペリエンスの質を維持しながら、ビデオチェーンのエンドツーエンドの二酸化炭素排出量を削減することが非常に重要です。
影響力のある方法で貢献するために、私たちは 3R-INN を提案します。これは 3 つのタスクを同時に実行する単一光可逆ネットワークです。高解像度の粒子の粗い画像が与えられた場合、それをより低い解像度に再スケーリングし、フィルム粒子を除去し、消費電力を削減します。
表示されます。
このような実行可能な最低限の品質のコンテンツを提供することは、エンコード、送信、デコード、および表示時のエネルギー消費の削減に貢献します。
3R-INN は、その可逆性と高周波のもつれの解消により、補助データを送信せずに、高解像度の粒子の粗いオリジナル画像または粒子のないバージョンを復元する可能性も提供します。
実験の結果、3R-INN は、エンコード (78%)、デコード (77%)、レンダリング (5% ～ 20%) で大幅なエネルギー節約を可能にしながら、最先端のフィルム グレイン合成やエネルギーを考慮した方法よりも優れたパフォーマンスを発揮することが示されています。
さまざまなテストセットでの再スケーリングタスクで最先端のパフォーマンスを実現します。

要約(オリジナル)

The consumption of a video requires a considerable amount of energy during the various stages of its life-cycle. With a billion hours of video consumed daily, this contributes significantly to the greenhouse gas emission. Therefore, reducing the end-to-end carbon footprint of the video chain, while preserving the quality of experience at the user side, is of high importance. To contribute in an impactful manner, we propose 3R-INN, a single light invertible network that does three tasks at once: given a high-resolution grainy image, it Rescales it to a lower resolution, Removes film grain and Reduces its power consumption when displayed. Providing such a minimum viable quality content contributes to reducing the energy consumption during encoding, transmission, decoding and display. 3R-INN also offers the possibility to restore either the high-resolution grainy original image or a grain-free version, thanks to its invertibility and the disentanglement of the high frequency, and without transmitting auxiliary data. Experiments show that, while enabling significant energy savings for encoding (78%), decoding (77%) and rendering (5% to 20%), 3R-INN outperforms state-of-the-art film grain synthesis and energy-aware methods and achieves state-of-the-art performance on the rescaling task on different test-sets.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google