Luma Labsはパラダイムシフトのソリューションを導入しました。 ビデオを修正 オリジナルの演技、カメラワーク、キャラクターアニメーションを損なうことなく、シーンを包括的に再構築できるModify Video。「何が起こっているか」(俳優の動きや表情)と「どこで起こっているか」(環境、テクスチャ、照明、ビジュアルスタイル)を切り離すことで、かつてないほどのクリエイティブな柔軟性を実現します。
主な機能とその仕組み
1. モーション抽出とパペット操作
自動全身および顔のモーションキャプチャ: Modify Video は入力クリップを分析し、全身のポーズ、顔の表情、リップシンク情報を自動的に抽出できます。
新しいキャラクターやオブジェクトの操作これらの「モーション データ」をキャプチャすると、新しい 3D キャラクター、小道具、またはカメラの動きを制御するために適用できます。
たとえば、俳優の演技をモンスターなどの生き物に「転送」したり、卓上の動きをダンスのルーティンと完全に同期させたりすることができます。
: パフォーマンスを元の外観から切り離すことで、クリエイターは元の演技のニュアンスとタイミングを維持しながら、別のキャラクターやオブジェクトを試すことができます。

