広告

Runway Aleph:カメラアングル、オブジェクトの削除、リライティングなど、AI が実際の映像を編集

Runway Aleph:カメラアングル、オブジェクトの削除、リライティングなど、AI が実際の映像を編集

Runway Aleph という包括的なコンテキストビデオモデルは、カメラアングルの生成から複雑な VFX 作業まで、あらゆることを実際の映像に基づいて処理することができる。これは、映像クリエイターにとって実際に役立つツールかもしれない。

Runwayは「Aleph」を発表した。これは、単一のインターフェースで複数のポストプロダクションタスクを処理する「最先端のコンテキスト内動画モデル」と言われている。従来のAI動画ツールがゼロからの生成に焦点を当てていたのに対し、Alephは、既存の映像を操作できる包括的な編集スイートとして位置付けられている。

Runway Alephが実際にできること

Alephは既存の映像から新しいカメラ角度を生成し、シームレスなショットを作成、スタイル転送を適用、環境や天候条件を変更、オブジェクトの追加や削除、キャラクターの外見を調整、要素の再着色、照明の調整、さらにはグリーンスクリーンマットの作成まで、すべてテキストプロンプトを通じて行うことができる。

映像クリエイターにとって、いくつかの機能は特に注目に値する。カメラアングル生成機能は、カバー範囲の取得方法を革命的に変える可能性がある(私たちは最近、映画のカバー範囲に関する異なる哲学について書いたが、これは議論に新たな視点をもたらす)。単一のマスターショットを撮影し、ポストプロダクションでクローズアップ、リバースショット、カットアウェイを生成する。システムは、限られたソース素材から「無限のカバー範囲」を生成しながら、シーンの一貫性を維持できるようだ。

オブジェクト操作機能は、ポストプロダクションの一般的な課題を解決する。Runway Alephは、照明、影、視点の自然な統合により、不要な反射を削除したり、空の通りに群衆を追加したり、正午の強い光をゴールデンアワーの光に変えた利することができる。

オリジナルショット(実際の動画)。動画提供:Runway ML

テキストプロンプトのみで反射を削除できる。動画提供:Runway ML

プロフェッショナルな現実検証

本題に入ろう。これらの機能が約束通りの性能を発揮する場合(現時点では試すことはできないが、利用可能性については後述する)、映像制作の方法に革命的な変化をもたらすことになる。カメラアングルの生成能力は、クルーの人員削減や撮影日数の短縮を可能にする。オブジェクト操作機能は、伝統的なVFXワークフローを置き換える可能性がある。照明調整は、主要撮影時の大規模な照明セットアップの必要性を最小限に抑える。そして、これらすべてが、将来の制作方法や、私たちのようなカメラマンの業務に深刻な影響を与える可能性がある。

この効率化は、業界の雇用に明らかな影響を及ぼす。AIツールがアーティスト、編集者、スタッフを置き換える可能性について私たちが指摘してきた懸念は、ここにも当てはまる——Alephの包括的な範囲を考慮すると、さらに深刻かもしれない。ひとつのツールが、従来はカラリスト、VFXアーティスト、ロトスコープ専門家、カメラマンが必要だったタスクを処理できる場合、伝統的なワークフローへの経済的圧力は否定できない。

オリジナルショット(実際の動画)。動画提供:Runway ML

プロンプト「被写体のミドルフルショットを生成」による生成ショット。動画提供:Runway ML

Runway Alephの技術的考慮事項と制限

Runwayのデモは印象的だが、いくつかの疑問が残る。異なる入力タイプや条件下での生成映像の品質と一貫性は、現在の例からは完全に明確ではない。プロフェッショナルな制作では、印象的なデモリールだけでなく、予測可能で再現可能な結果が求められる。

既存のプロフェッショナルワークフローとの統合も考慮すべき点だ。Alephは高解像度映像をどのように処理するのか?カラースペース管理、タイムコード、メタデータ保持についてはどうなのか?プロのカラリストやVFXスーパーバイザーが求める精密な制御を維持できるのか?DaVinci ResolveやPremiere ProなどのNLE内にプラグインを統合し、NLE内でこれらのショットを生成できるのか?

モデルの「コンテキスト内」の性質は、既存の映像を分析してシーンの文脈を理解することを示唆しているが、この理解の程度と多様なコンテンツタイプにおける信頼性は、実際の制作シナリオで検証される必要がある。

オリジナルショット(実際の動画)。動画提供:Runway ML:

上記のオリジナルショットに基づいて生成された「次のショット」。動画提供:Runway ML

Runway Alephを今すぐ試すことはできるか?

まだできない。Runwayは、まずエンタープライズとクリエイティブパートナー向けに早期アクセスを順次提供し(近日中)、その後すべてのユーザーへの広範な提供を計画している。

過去には、Lionsgate との提携発表や、Tribeca などの映画祭への参加など、業界との深い関わりを示している。しかし、印象的なデモと、プロの映画制作の要求に対応できる実用的なツールとの間には、歴史的に大きなギャップが存在してきた。

これまで困難だったVFX動画の操作が、少なくともデモでは、プロンプト一つで実現可能に見える。画像提供:Runway Alphaウェブサイトからのスクリーンショット。

大きな流れ

Runway Alephは、AI動画ツールの統合トレンドを象徴している。特定のタスクに特化したモデルではなく、ポストプロダクションの複数の側面を扱う総合プラットフォームが登場している。これは、伝統的な編集ソフトウェアが徐々にカラー補正、オーディオミキシング、基本的なコンポジティング機能を取り入れてきた進化と類似している。また、テキストプロンプトからすべてをゼロから生成するのではなく、実際に撮影した映像をベースに制作を開始したいプロの映像クリエイターを明確にターゲットにしている。

映像クリエイターにとっての質問は、AlephのようなAIツールが標準ワークフローの一部になるかどうかではない。ほぼ確実にそうなるからだ。問題は、その速度と、業界、そして私たち——業界で生計を立てる映像クリエイターが、ポストプロダクションコストとスタッフ要件の劇的な削減に対応するため、経済モデルを適応させられるかどうかだ。

オリジナルショット(実際の動画)。動画クレジット:Runway ML

生成された背景 – 人物群を追加 – 上記のオリジナルショットに追加。動画クレジット:Runway ML

今後の展望

Runway Alephは、映画制作の可能性を再定義するAI動画ツールのエコシステムに参入した。この技術は確かに印象的だが、その真の影響はデモ動画ではなく、実際の制作スケジュール、クライアントの修正、プロの映像制作を特徴付ける数多くの小さな妥協の下でどのように機能するかで測られるだろう。

このツールの包括的なアプローチは、ハイエンドのポストプロダクション技術を民主化し、小規模な制作でも高度なビジュアルエフェクトを可能にする可能性がある。同時に、映像制作の将来的な構造や伝統的な専門技術の役割に関する根本的な疑問を提起している。

早期アクセスが開始されるにつれ、映像制作コミュニティはこれらの機能を手軽に体験できるようになる。真の試金石は、Alephが印象的な個々のショットを作成できるかどうかではなく、プロフェッショナルなポストプロダクションワークフローの複雑で反復的な要求を信頼性高く処理できるかどうかだ。

Leave a reply

フィルター
全て
ソート
latest
フィルター
全て
ソート
latest