Luma Labs는 패러다임을 전환하는 솔루션을 도입했습니다. 비디오 수정 원래의 연기, 카메라 움직임, 캐릭터 애니메이션을 손상시키지 않고 포괄적인 장면 재구성을 가능하게 합니다. Modify Video는 "무엇"이 일어나는지(배우의 동작과 표정)와 "어디서" 일어나는지(환경, 텍스처, 조명, 시각적 스타일)를 분리함으로써 전례 없는 창의적 유연성을 제공합니다.
주요 기능 및 작동 방식
1. 동작 추출 및 퍼펫티어링
자동 전신 및 얼굴 모션 캡처: 비디오 수정 기능은 입력 클립을 분석하여 전신 포즈, 얼굴 표정, 립싱크 정보를 자동으로 추출합니다.
새로운 캐릭터 또는 객체 구동: 이러한 "모션 데이터"를 캡처하면 새로운 3D 캐릭터, 소품 또는 카메라 움직임을 구동하는 데 적용할 수 있습니다.
예를 들어, 배우의 연기를 괴물과 같은 생물에게 "전송"할 수도 있고, 댄스 루틴과 완벽하게 동기화된 테이블 위의 움직임을 구현할 수도 있습니다.
: 공연을 원래 모습과 분리함으로써 창작자는 원래 공연의 뉘앙스와 타이밍을 보존하면서 대체 캐릭터나 사물을 실험할 수 있습니다.
