Luma Labs 推出了一種範式轉換解決方案：一種名為 修改影片 它可以實現全面的場景重建，而不會影響原始表演、攝影機運動或角色動畫。透過將「正在發生的事情」（演員的動作和表情）與「發生地點」（環境、紋理、燈光和視覺風格）分離，Modify Video 釋放了前所未有的創作靈活性。
主要特點及其工作原理
1. 動作提取與木偶操控
自動全身和臉部動作捕捉：Modify Video 可以分析輸入剪輯並自動提取全身姿勢、面部表情和嘴唇同步資訊。
駕駛新角色或物體：一旦捕獲這些“運動數據”，它們就可以用於驅動任何新的 3D 角色、道具或攝影機運動。
例如，您可以將演員的表演「轉移」到怪物等生物上，或者可以讓桌面動作與舞蹈動作完美同步。
為什麼重要:
透過將表演與原始外觀分離，創作者可以嘗試替代角色或物體，同時保留原始表演的細微差別和時間。
2. 🌆 世界與風格交換
- 保留行動，改變一切
無需改變核心角色動畫或時間，您可以徹底改變場景的外觀、感覺和材質屬性。 - 變換範例
- 將破舊的車庫改造成太空船的內部。
- 將陽光明媚的街道變成霓虹閃爍的夜景。
- 用逼真的紋理和燈光取代卡通美感。
- 基礎技術
Luma AI 的修改影片對原始場景的幾何形狀和時間連貫性建立了高保真理解，確保任何視覺變化隨時間保持穩定 - 避免扭曲、抖動或「時間扭曲」偽影。
3. 獨立元素編輯
- 無需綠幕即可進行針對性的調整
您可以挑選並修改單一元素（例如角色的服裝、特定道具，甚至只是天空），而不會影響畫面的其他部分。 - 說明性用例
- 改變表演者服裝的顏色或風格。
- 將一個演員的臉換成另一個演員的臉。
- 在場景上方添加一個在天空中巡航的 UFO。
- 無需逐幀跟踪
由於工具能夠理解空間和時間背景，您無需手動進行轉描或進行繁瑣的逐幀調整。剪輯內容會自然融入素材中。
營運模式和創意靈活性
修改影片提供三種預設的轉換模式，每種模式都賦予了不同程度的創作自由。使用者可以選擇最適合自己專案需求的模式：
堅持模式（最小調整）
目的： 盡可能保留原始影片的結構，僅進行細微的樣式或紋理調整。
何時使用： 非常適合想要在多個鏡頭中保持一致性或進行細微的後製修復（例如調整背景顏色或更換略微偏離模型的道具）的情況，同時保持演員的表演和攝影機角度不變。
彈性模式（平衡創造力）
目的： 保持關鍵元素（如角色的動作、面部表情和時間）不變，但允許更廣泛的創意修改。
何時使用： 適用於需要在忠實再現和全新詮釋之間尋求平衡的項目。例如，您可以將整體場景更改為不同的風格，或更換角色的服裝和基本道具，同時保留原始表演的精髓。此模式尤其適用於快速產生多種風格變體，例如用於客戶預覽。
重新構想模式（完全重建）
目的： 透過讓您完全重新設計環境、角色，甚至將表演者變成非人類實體（如幻想生物），釋放最大的創作自由。
何時使用： 非常適合藝術專案、概念短片，或任何想要徹底重塑素材的場景。在「重塑模式」下，你可以徹底改造場景或角色外觀，創造出令人驚艷、超現實或超凡脫俗的效果。
選擇正確的模式
- 堅持模式 當您的目標是在不影響原始資產完整性的情況下進行微調時（例如確保多鏡頭序列的視覺一致性），這是您的首選。
- 彈性模式 當你需要平衡時效果最佳：你仍然可以保證表演的真實性，但你可以嘗試設定、燈光、服裝或次要角色的重新設計。
- 重新想像模式 是為需要打破常規創造力的專案量身定制的——需要徹底改造整個世界或主要角色以獲得最大的視覺衝擊。
如何使用 Luma AI 修改視頻
修改影片已整合到 Luma 夢幻機器：Ray 2，支援最長10秒的剪輯。工作流程如下：
- 上傳短影片片段:為獲得最佳效果，請將剪輯保持在 5-10 秒範圍內，以高解析度拍攝並盡量減少相機震動。
- 選擇轉換模式：根據您想要的改變的徹底程度，選擇「堅持」、「靈活」或「重新想像」。
- 提供參考框架或樣式提示（可選）：如果您有特定的外觀或關鍵影格（例如，概念藝術作品的靜止圖像），您可以上傳它。
- 輸入文字提示（如果需要）：詳細、正面的描述（例如，「黃昏時分，霓虹燈閃爍的賽博龐克街道上，車輛盤旋而過」）有助於系統準確地解讀您的視覺。
- 調整“修改強度”：在微妙和戲劇性的轉變之間進行撥號。
- 產生並審查多個變體：系統輸出多個版本；您可以選擇最佳版本並進一步迭代或直接匯出。
拍攝前建議
- 穩定你的相機：使用三腳架或萬向架來最大限度地減少抖動並確保乾淨的動作提取。
- 選擇簡單的背景：樸素的牆壁或整潔的空間有助於 AI 更有效地隔離物件。
- 捕捉高解析度、光線充足的鏡頭：清晰的畫面可產生更準確的姿勢和紋理資料。
- 將剪輯保持在 10 秒以內：雖然系統支援最多 10 秒，但 5-7 秒的片段可以平衡內容深度和處理效率。
需要考慮的限制
- 最長 10 秒剪輯
如果有較長的序列，則需要將它們分成多個片段進行處理。 - 輸入的品質影響輸出
模糊、低解析度或吵雜的鏡頭會降低動作捕捉的準確性和最終的視覺保真度。 - 混亂或擁擠的場景
拍攝許多快速移動的物體或背景過於雜亂的照片可能會產生不穩定的偽影或意外的混合錯誤。 - 複雜重疊元素
具有多個重疊演員或道具的場景可以挑戰隔離演算法——更簡單的設定通常會產生更清晰的結果。
綜上所述， 修改影片 代表了後製靈活性的革命性飛躍——讓您在重建整個世界的同時，保留表演的精髓。 Luma AI 與 Ray 2 全新整合的功能（例如 Adobe Firefly 相容性、攝影機角度概念和關鍵影格控制）相結合，賦能創作者以前所未有的靈活性和創造力來講述故事。無論您需要細微的風格調整，還是全面的超現實主義重塑，這套不斷發展的工具集都能顯著擴展每個 10 秒片段的無限可能。
入門
CometAPI 提供了一個統一的 REST 接口，在一致的端點下聚合了數百個 AI 模型，並具有內建的 API 金鑰管理、使用配額和計費儀表板。而不需要處理多個供應商 URL 和憑證。
開發人員可以存取最新的 亮度 API 通過 彗星API。首先，探索該模型的功能 游乐场 並諮詢 API指南 以獲得詳細說明。造訪前請確保您已經登入CometAPI並取得API金鑰。 彗星API 提供遠低於官方價格的價格，助您整合：
