Generative Outpainting To Enhance the Memorability of Short-Form Videos

要約

広告、ソーシャル メディア、エンターテイメント、教育などで短編ビデオ形式の使用が拡大しているため、そのようなメディアが人々を魅了し、記憶に残る必要があります。
ビデオの記憶力は、そのコンテンツと感情的または個人的なつながりを持たない視聴者がそのビデオをどの程度記憶に留めるかを示します。
この論文では、記憶性を向上させることを目的として、ジェネレーティブ アウトペイントを使用して短編ビデオの画面サイズを拡大した結果を示します。
機械学習と深層学習の進歩を比較し、ビデオの画面サイズの境界を拡張することが視聴者の記憶にどのような影響を与えるかを理解するために活用します。
定量的評価を使用して、ビデオ記憶性スコアに対する画像の顕著性に基づいて、アウトペイントの最もパフォーマンスの高いモデルと、アウトペイントの影響を決定します。

要約(オリジナル)

With the expanding use of the short-form video format in advertising, social media, entertainment, education and more, there is a need for such media to both captivate and be remembered. Video memorability indicates to us how likely a video is to be remembered by a viewer who has no emotional or personal connection with its content. This paper presents the results of using generative outpainting to expand the screen size of a short-form video with a view to improving its memorability. Advances in machine learning and deep learning are compared and leveraged to understand how extending the borders of video screensizes can affect their memorability to viewers. Using quantitative evaluation we determine the best-performing model for outpainting and the impact of outpainting based on image saliency on video memorability scores

arxiv情報

提供元, 利用サービス

arxiv.jp, Google