要約
ビデオのカラー化は、灰色がかったフレームからカラフルでもっともらしい結果を得ることを目的として、最近大きな関心を呼んでいます。
それにもかかわらず、カラー化された結果の品質を維持しながら時間的な一貫性を維持する方法は依然として課題です。
上記の問題に取り組むために、時空間接続構造 (ST-HVC と呼ばれる) を使用したヒストグラム ガイド付きビデオ カラーライゼーションを提案します。
彩度と動きの情報を最大限に活用するために、ジョイント フローおよびヒストグラム モジュールは、ヒストグラムとフローの機能を統合するように調整されています。
ぼやけとアーティファクトを管理するために、時間的な詳細とフロー特徴の組み合わせに注意を払った組み合わせスキームを設計します。
さらに、U 字型ネットワークを介してヒストグラム、フロー、シャープネスの特徴を再結合します。
いくつかの最先端の画像およびビデオベースの手法と広範な比較が行われ、開発された手法が 2 つのビデオ データセットにおいて量的および質的に優れたパフォーマンスを達成することが実証されました。
要約(オリジナル)
Video colorization, aiming at obtaining colorful and plausible results from grayish frames, has aroused a lot of interest recently. Nevertheless, how to maintain temporal consistency while keeping the quality of colorized results remains challenging. To tackle the above problems, we present a Histogram-guided Video Colorization with Spatial-Temporal connection structure (named ST-HVC). To fully exploit the chroma and motion information, the joint flow and histogram module is tailored to integrate the histogram and flow features. To manage the blurred and artifact, we design a combination scheme attending to temporal detail and flow feature combination. We further recombine the histogram, flow and sharpness features via a U-shape network. Extensive comparisons are conducted with several state-of-the-art image and video-based methods, demonstrating that the developed method achieves excellent performance both quantitatively and qualitatively in two video datasets.
arxiv情報
| 著者 | Zheyuan Liu,Pan Mu,Hanning Xu,Cong Bai |
| 発行日 | 2023-08-09 11:59:18+00:00 |
| arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google