論文の概要: Reviewing Intelligent Cinematography: AI research for camera-based video production
- arxiv url: http://arxiv.org/abs/2405.05039v1
- Date: Wed, 8 May 2024 13:13:02 GMT
- ステータス: 処理完了
- システム内更新日: 2024-05-09 14:24:42.487580
- Title: Reviewing Intelligent Cinematography: AI research for camera-based video production
- Title（参考訳）: インテリジェントシネマトグラフィーのレビュー:カメラによるビデオ制作のためのAI研究
- Authors: Adrian Azzarelli, Nantheera Anantrasirichai, David R Bull,
- Abstract要約: 本稿では、エンターテイメント目的のリアルカメラコンテンツ取得の文脈における人工知能(AI)研究の総合的なレビューを提供する。
コンピュータビジョン研究の広さと、インテリジェント撮影技術(IC)に関連するレビュー論文の欠如を踏まえ、本レビューでは、IC景観の全体像を紹介する。
- 参考スコア（独自算出の注目度）: 9.158626732325915
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper offers a comprehensive review of artificial intelligence (AI) research in the context of real camera content acquisition for entertainment purposes and is aimed at both researchers and cinematographers. Considering the breadth of computer vision research and the lack of review papers tied to intelligent cinematography (IC), this review introduces a holistic view of the IC landscape while providing the technical insight for experts across across disciplines. We preface the main discussion with technical background on generative AI, object detection, automated camera calibration and 3-D content acquisition, and link explanatory articles to assist non-technical readers. The main discussion categorizes work by four production types: General Production, Virtual Production, Live Production and Aerial Production. Note that for Virtual Production we do not discuss research relating to virtual content acquisition, including work on automated video generation, like Stable Diffusion. Within each section, we (1) sub-classify work by the technical field of research - reflected by the subsections, and (2) evaluate the trends and challenge w.r.t to each type of production. In the final chapter, we present our concluding remarks on the greater scope of IC research and outline work that we believe has significant potential to influence the whole industry. We find that work relating to virtual production has the greatest potential to impact other mediums of production, driven by the growing interest in LED volumes/stages for in-camera virtual effects (ICVFX) and automated 3-D capture for a virtual modelling of real world scenes and actors. This is the first piece of literature to offer a structured and comprehensive examination of IC research. Consequently, we address ethical and legal concerns regarding the use of creative AI involving artists, actors and the general public, in the...
- Abstract（参考訳）: 本稿では,エンターテイメント目的の実際のカメラコンテンツ取得の文脈における人工知能(AI)研究の総合的なレビューを行い,研究者と撮影者の両方を対象としている。
コンピュータビジョン研究の広さと、インテリジェント撮影技術(IC)に関連するレビュー論文の欠如を踏まえ、本レビューでは、ICの全体像を概観するとともに、さまざまな分野の専門家に技術的な洞察を提供しながら紹介する。
我々は、生成AI、オブジェクト検出、自動カメラキャリブレーションと3Dコンテンツ取得に関する技術的背景と、非技術読者を支援するための説明記事のリンクについて、主要な議論を述べる。
主な議論は、General Production、Virtual Production、Live Production、Aerial Productionの4つのプロダクションタイプによって分類される。
なお、Virtual Productionでは、Stable Diffusionのような自動ビデオ生成など、仮想コンテンツ取得に関する研究については議論していません。
各セクション内では,(1)研究の技術的分野による作業のサブクラス分けを行い,(2)各タイプの生産の傾向と課題を評価する。
最終章では、IC研究の広範な範囲に関する結論を述べ、業界全体に大きな影響を与える可能性があると信じている研究の概要を述べる。
実世界のシーンやアクターの仮想モデリングのための3次元自動キャプチャー(ICVFX)のLEDボリューム/ステージへの関心が高まり、仮想プロダクションに関連する作業が他の生産媒体に影響を与える可能性が最も高いことが判明した。
これはIC研究の構造化された総合的な調査を提供する最初の文献である。
その結果、アーティスト、俳優、一般大衆が関わるクリエイティブAIの使用に関する倫理的および法的懸念に対処する。
関連論文リスト
- Aligning Cyber Space with Physical World: A Comprehensive Survey on Embodied AI [95.96983812740683]
人工知能(Embodied AI)は、人工知能(AGI)の実現に不可欠である
MLMとWMは、その顕著な知覚、相互作用、推論能力のために、大きな注目を集めている。
本調査では,Embodied AIの最近の進歩を包括的に調査する。
論文 参考訳（メタデータ） (2024-07-09T14:14:47Z) - A Comprehensive Taxonomy and Analysis of Talking Head Synthesis: Techniques for Portrait Generation, Driving Mechanisms, and Editing [8.171572460041823]
トーキングヘッド合成は、特定のコンテンツによって駆動される静止画像からポートレートビデオを生成する高度な方法である。
本調査は,3つの重要な領域 – ポートレート生成,駆動機構,編集技術 – に分類し,その技術を体系的にレビューする。
論文 参考訳（メタデータ） (2024-06-15T08:14:59Z) - Recent Trends in 3D Reconstruction of General Non-Rigid Scenes [104.07781871008186]
コンピュータグラフィックスやコンピュータビジョンにおいて、3次元幾何学、外観、実際のシーンの動きを含む現実世界のモデルの再構築が不可欠である。
これは、映画産業やAR/VRアプリケーションに有用な、フォトリアリスティックなノベルビューの合成を可能にする。
この最新技術レポート(STAR)は、モノクロおよびマルチビュー入力による最新技術の概要を読者に提供する。
論文 参考訳（メタデータ） (2024-03-22T09:46:11Z) - A Comprehensive Survey of 3D Dense Captioning: Localizing and Describing
Objects in 3D Scenes [80.20670062509723]
3Dシークエンスキャプションは、3Dシーンの詳細な説明を作成することを目的とした、視覚言語によるブリッジングタスクである。
2次元の視覚的キャプションと比較して、現実世界の表現が密接なため、大きな可能性と課題が提示される。
既存手法の人気と成功にもかかわらず、この分野の進歩を要約した総合的な調査は乏しい。
論文 参考訳（メタデータ） (2024-03-12T10:04:08Z) - A Disruptive Research Playbook for Studying Disruptive Innovations [11.619658523864686]
本稿では、説得力があり社会的に関係のある研究課題を定式化するためのガイドを提供するための研究プレイブックを提案する。
私たちは、AIとAR/VRの2つの破壊的なテクノロジの影響を疑問視するために使用することができることを示しています。
論文 参考訳（メタデータ） (2024-02-20T19:13:36Z) - A Survey on Generative AI and LLM for Video Generation, Understanding, and Streaming [26.082980156232086]
生成人工知能(Generative AI)と大規模言語モデル(LLM)は、ビデオ技術の分野を変えつつある。
この論文は、高度にリアルなビデオ制作におけるこれらの技術の革新的利用を強調している。
ビデオストリーミングの分野では、LLMがより効率的でユーザ中心のストリーミング体験にどのように貢献するかを論じる。
論文 参考訳（メタデータ） (2024-01-30T14:37:10Z) - State of the Art on Diffusion Models for Visual Computing [191.6168813012954]
本稿では,拡散モデルの基本数学的概念,実装の詳細,および一般的な安定拡散モデルの設計選択を紹介する。
また,拡散に基づく生成と編集に関する文献の急速な発展を概観する。
利用可能なデータセット、メトリクス、オープンな課題、社会的意味について議論する。
論文 参考訳（メタデータ） (2023-10-11T05:32:29Z) - Deep Learning for Event-based Vision: A Comprehensive Survey and Benchmarks [55.81577205593956]
イベントカメラはバイオインスパイアされたセンサーで、ピクセルごとの強度の変化を非同期に捉える。
深層学習(DL)はこの新興分野に導入され、その可能性のマイニングに活発な研究努力にインスピレーションを与えている。
論文 参考訳（メタデータ） (2023-02-17T14:19:28Z) - The Entoptic Field Camera as Metaphor-Driven Research-through-Design
with AI Technologies [28.81674106342742]
本稿では,Entoptic Field Cameraの作成と利用を通じて,画像生成の手段とモードの変化を探求するResearch-through-Designプロジェクトについて述べる。
我々は、AI技術におけるデータとモデルの物質的相互作用が、現実の人間の体験をいかに形作るかを研究するメタファーとして、エントロピーという用語を使用している。
論文 参考訳（メタデータ） (2023-01-23T17:03:54Z) - A Survey on Deep Learning Technique for Video Segmentation [147.0767454918527]
ビデオセグメンテーションは幅広い応用において重要な役割を果たしている。
ディープラーニングベースのアプローチは、ビデオセグメンテーションに特化しており、魅力的なパフォーマンスを提供している。
論文 参考訳（メタデータ） (2021-07-02T15:51:07Z) - Understanding and Creating Art with AI: Review and Outlook [12.614901374282868]
人工知能(AI)に関連する技術は、視覚芸術における研究と創造的実践の変化に強い影響を与える。
本稿では,AIとアートの2つの側面を総合的にレビューする:1)AIはアート分析に使用され,デジタル化されたアートコレクションに使用される;2)AIは創造的な目的に使用され,新しいアート作品を生成する。
アートの創造におけるAIの役割に関して、AIアートの様々な実践的・理論的側面に対処し、それらのトピックを詳細に扱った関連作品を統合します。
論文 参考訳（メタデータ） (2021-02-18T01:38:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。