Brainstorm が EMERALD プロジェクトに参加

ブレーンストーミングヨーロッパプロジェクトに参加していますエメラルド「エンターテイメントと持続可能なメディアのためのプロセスオートメーションと AI」。Horizon Europe プログラムに基づいて欧州委員会から資金提供を受けています。

7 つのパートナーからなる学際的なコンソーシアムには、Brainstorm に加えて、映画、放送、ストリーミング、ライブエンターテイメントテクノロジー分野の大手企業が含まれています (BBC、Disguise Systems、Filmlight、MOG Technologies）、2人でサポート ヨーロッパの重要な大学 (Universidad Pompeu Fabra y The Provost, Fellows, Foundation Scholars & The Other Members Of Board Of The College Of The Holy & Undivided Trinity Of Queen Elizabeth Near Dublin).

フランシスコ・イバネス, Brainstorm の R&D プロジェクトディレクターは、「EMERALD は、人工知能、機械学習、ビッグデータ技術の可能性を活用し、デジタルエンターテインメントおよびメディア分野向けの革新的なツールの先駆者となるよう努めています。全体的な目標は、最先端のイノベーションを通じて処理に革命を起こし、生産効率を向上させ、エネルギー消費を最小限に抑え、コンテンツの品質を向上させることです。」と強調しています。

「現在、ビデオベースの拡張現実コンテンツの量が大幅に増加しており、訓練を受けた人材、データ処理、エネルギーに対する持続不可能な需要が生じています。このプロジェクトは、持続可能なメディア作成のためのプロセス自動化を開発することで、この課題に対処することを目的としています。」と彼は付け加えました。

EMERALD は、機械学習を適用して、時間とエネルギーの使用量の両方に多大な影響を与える、ビデオコンテンツ制作における最も労働集約的なタスクの一部を自動化することを目指しています。

ハビエル・モンテサBrainstorm の技術研究開発コーディネーターである Brainstorm は、ポンペウ・ファブラ大学 (UPF) と協力して、ビデオマッティングのための深層学習に基づく手法とツールを開発すると述べています。「主な目標は、『トライマップ』を必要とせずにディープラーニングを使用して、リモートのプレゼンターやアーティストを放送やストリーミングメディアの仮想シーンやセットに自動的にリアルタイムで統合するための高品質な結果を生み出すことです。BRAのInfinitySetのAI強化により、グリーンスクリーン手法の品質をよりシンプルな構成にもたらすでしょう」と彼は断言する。

モンテサ氏は、ブレインストームには次のような計画があると説明しています。 InfinitySet と UPF 深層学習システムを統合する 頭と体の姿勢推定のため、オペレーターはコンテンツをトリガーして、シーンのさまざまな部分、仮想スクリーン、3D グラフィックスプレースホルダー、または単に移動中にプレゼンターの前に自動的に表示できるようになります。イバニェス氏は、「プレゼンターの挿入を改善し、シルエットを変更し、より正確かつリアルに影を計算するための新しい方法が模索される予定です」と付け加えた。

さらに、ブレインストーミングは、次の目的のために設計されたツールの作成にも参加します。 自動カラーバランスとショットマッチング。色の操作は、ポストプロダクション、仮想プロダクション、および仮想放送スタジオで必要です。

ハビエルモンテサ氏は、仮想シーンに合わせてプレゼンターのカラーグレーディングを自動化することは、カラリストがいない仮想放送スタジオにとって特に価値があると述べています。「この自動色補正を InfinitySet に統合することで、ツールの使用が簡素化され、照明条件が制御されていない場合や、仮想シーンの照明条件がプログラム中に変化することが意図されている場合のプレゼンターとシーンの統合が向上します。」