Marine Video Kit: A New Marine Video Dataset for Content-based Analysis and Retrieval

要約

異常なドメイン固有のビデオ コレクションの効果的な分析は、最先端の汎用モデルが依然として限界に直面している重要な実用上の問題です。
したがって、追加の制約を使用して、特定のドメインの新しい強力なモデルに挑戦するベンチマーク データセットを設計することが望ましいです。
ドメイン固有のデータはノイズが多く (内視鏡ビデオや水中ビデオなど)、多くの場合、効果的な検索には経験豊富なユーザーが必要になることを覚えておくことが重要です。
このホワイト ペーパーでは、水中環境で移動カメラから撮影されたシングル ショット ビデオに焦点を当てます。
新しい Marine Video Kit データセットの最初のシャードは、ビデオ検索やその他のコンピューター ビジョンの課題に役立つように提示されています。
基本的なメタデータ統計に加えて、選択したキーフレームのセマンティック アノテーションだけでなく、低レベルの機能に基づいて、いくつかの洞察と参照グラフを提示します。
分析には、検索のための一般的な目的のモデルの制限を示す実験も含まれています。

要約(オリジナル)

Effective analysis of unusual domain specific video collections represents an important practical problem, where state-of-the-art general purpose models still face limitations. Hence, it is desirable to design benchmark datasets that challenge novel powerful models for specific domains with additional constraints. It is important to remember that domain specific data may be noisier (e.g., endoscopic or underwater videos) and often require more experienced users for effective search. In this paper, we focus on single-shot videos taken from moving cameras in underwater environments which constitute a nontrivial challenge for research purposes. The first shard of a new Marine Video Kit dataset is presented to serve for video retrieval and other computer vision challenges. In addition to basic meta-data statistics, we present several insights and reference graphs based on low-level features as well as semantic annotations of selected keyframes. The analysis contains also experiments showing limitations of respected general purpose models for retrieval.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google