要約
ビデオ編集の分野では、サウンドはオブジェクトに個性を加え、視聴者を空間に没入させるのに役立ちます。
プロの編集者 (N=10) との形成的なインタビューを通じて、ビデオにサウンドを追加する作業は難しい場合があることがわかりました。
この文書では、編集者がサウンドとビデオを一致させるのを支援するシステム Soundify について説明します。
ビデオを指定すると、Soundify は一致するサウンドを特定し、サウンドをビデオに同期させ、パンとボリュームを動的に調整して空間オーディオを作成します。
人間による評価研究 (N=889) では、Soundify がさまざまなオーディオ カテゴリに対して、すぐにサウンドとビデオをマッチングできることを示しました。
被験者内での専門家研究 (N=12) では、ビデオ編集者が作業負荷を軽減し、タスク完了時間を短縮し、使いやすさを向上させてサウンドとビデオを一致させるのに役立つ Soundify の有用性を実証しました。
要約(オリジナル)
In the art of video editing, sound helps add character to an object and immerse the viewer within a space. Through formative interviews with professional editors (N=10), we found that the task of adding sounds to video can be challenging. This paper presents Soundify, a system that assists editors in matching sounds to video. Given a video, Soundify identifies matching sounds, synchronizes the sounds to the video, and dynamically adjusts panning and volume to create spatial audio. In a human evaluation study (N=889), we show that Soundify is capable of matching sounds to video out-of-the-box for a diverse range of audio categories. In a within-subjects expert study (N=12), we demonstrate the usefulness of Soundify in helping video editors match sounds to video with lighter workload, reduced task completion time, and improved usability.
arxiv情報
| 著者 | David Chuan-En Lin,Anastasis Germanidis,Cristóbal Valenzuela,Yining Shi,Nikolas Martelaro |
| 発行日 | 2023-10-13 08:10:41+00:00 |
| arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google