要約
この論文は、エンターテインメント目的での実際のカメラ コンテンツ取得のコンテキストにおける人工知能 (AI) 研究の包括的なレビューを初めて提供するもので、研究者と映画監督の両方を対象としています。
インテリジェント シネマトグラフィー (IC) の分野におけるレビュー論文の不足と関連するコンピューター ビジョン研究の広範な問題に対処し、IC の展望の全体像を提示するとともに、分野を超えた専門家にとって重要な技術的洞察を提供します。
生成 AI、物体検出、自動カメラ キャリブレーション、3D コンテンツ取得に関する技術的背景を、技術者以外の読者を支援する参考資料とともに提供します。
アプリケーション セクションでは、一般制作、仮想制作、ライブ制作、空撮制作という 4 つの制作タイプに基づいて作品を分類します。
各アプリケーションセクションでは、(1) 研究テーマに応じて作業をサブ分類し、(2) 各種類の制作に関連する傾向と課題を説明します。
最終章では、IC 研究のより広範な範囲に取り組み、クリエイティブ産業分野に影響を与えるこの分野の大きな可能性を要約します。
カメラ内バーチャル エフェクト (ICVFX) 用の LED ボリューム/ステージや現実世界のバーチャル モデリング用の自動 3D キャプチャへの関心の高まりによって、バーチャル プロダクションに関連する作業が他の制作媒体に影響を与える可能性が最も大きいと考えられます。
シーンも俳優も。
また、アーティスト、俳優、技術者、一般大衆に影響を与えるクリエイティブ AI の使用に関する倫理的および法的懸念にも対処します。
要約(オリジナル)
This paper offers the first comprehensive review of artificial intelligence (AI) research in the context of real camera content acquisition for entertainment purposes and is aimed at both researchers and cinematographers. Addressing the lack of review papers in the field of intelligent cinematography} (IC) and the breadth of related computer vision research, we present a holistic view of the IC landscape while providing technical insight, important for experts across disciplines. We provide technical background on generative AI, object detection, automated camera calibration and 3-D content acquisition, with references to assist non-technical readers. The application sections categorize work in terms of four production types: General Production, Virtual Production, Live Production and Aerial Production. Within each application section, we (1) sub-classify work according to research topic and (2) describe the trends and challenges relevant to each type of production. In the final chapter, we address the greater scope of IC research and summarize the significant potential of this area to influence the creative industries sector. We suggest that work relating to virtual production has the greatest potential to impact other mediums of production, driven by the growing interest in LED volumes/stages for in-camera virtual effects (ICVFX) and automated 3-D capture for virtual modeling of real world scenes and actors. We also address ethical and legal concerns regarding the use of creative AI that impact on artists, actors, technologists and the general public.
arxiv情報
| 著者 | Adrian Azzarelli,Nantheera Anantrasirichai,David R Bull |
| 発行日 | 2025-01-06 14:41:22+00:00 |
| arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google