2막 런웨이의 차세대입니다 AI 성능 캡처 및 캐릭터 애니메이션 도구: 짧은 것을 섭취합니다 주행 성능 (누군가가 장면을 연기하는 모습을 담은 웹캠이나 휴대전화 영상)과 캐릭터 참조 (이미지 또는 비디오)를 생성하여 몸, 얼굴 표정, 손 동작을 캐릭터에 전달하는 애니메이션 캐릭터 퍼포먼스를 생성합니다. Act-Two는 Runway 웹 제품 내에서 제공되며, API 생태계를 통해 모델로 제공됩니다.
2막 모델 소개
2막 짧은 "드라이빙 퍼포먼스" 클립을 완벽하게 애니메이션화된 캐릭터 시퀀스로 변환하여 고충실도 애니메이션을 대중화하도록 설계되었습니다. 이 모델은 다음에 중점을 둡니다. 표현적 충실성 — 얼굴 미세 표정, 입술과 입의 움직임, 손가락/손 제스처 및 전신 자세를 전송하는 동시에 그럴듯한 환경 운동 문자 입력이 이미지인 경우. 2막 Runway의 이전 Act 모델을 발전시킨 형태로 자리매김했으며 Runway의 Gen-4 비디오 툴셋과 API에 긴밀하게 통합되었습니다.
2막은 뭐하는 거야?
- 전신 성능 전달: 단일 운전 영상에서 머리, 얼굴, 몸통, 손을 캐릭터 참조로 매핑합니다.
- 문자 입력 유연성: 문자를 허용합니다 영상 또는 참고 영상 목표로서.
- 제스처 제어 : 캐릭터 이미지를 사용할 때 구동 클립을 통해 손/몸짓을 구동하고 제스처 영향을 조정할 수 있습니다.
- 자동 환경 동작: 이미지 기반 캐릭터에 미묘한 배경/환경 동작을 추가하여 "떠다니는" 결과를 방지합니다.
기술적 세부 사항 및 작업 제약 사항
입력
- 주행 성능: 연기(동작, 제스처, 오디오)를 담은 영상입니다.
- 캐릭터 참조: 애니메이션을 적용하려는 캐릭터의 정지 이미지 또는 비디오입니다. ()
출력 및 형식
지원되는 종횡비 및 해상도는 다음과 같습니다. 1280×720 (16:9), 720×1280 (9:16), 960×960 (1:1) 그리고 다른 사전 설정의 작은 세트; 24의 FPS 출력의 표준 프레임 속도입니다. 자동 자르기 종횡비 목표에 맞게 조정합니다.
처리 중 메모: 운전 성능과 캐릭터가 동일한 방향을 향하고 유사한 화면 공간을 차지할 때 최상의 결과를 얻을 수 있습니다. 원근감이 심하게 불일치하거나 거리가 매우 멀거나 해상도가 낮은 피사체가 있는 입력은 결과의 질을 저하시킬 수 있습니다. Runway의 검토 및 콘텐츠 필터는 업로드된 에셋에 적용되며, 콘텐츠가 정책을 위반하는 경우 작업이 거부될 수 있습니다.
제한 사항 및 알려진 실패 모드
- 단기간 초점: 2막 ~에 최적화되어있다. 짧은 클립 (최소 3초, 일반적인 워크플로는 30초 미만을 사용합니다). 장편 모션 캡처의 경우, 여전히 기존 캡처 또는 청크 워크플로가 필요합니다.
- 검열/콘텐츠 안전: Runway의 관리 기능은 플래그가 지정된 입력에 대한 작업을 차단하거나 실패시킬 수 있습니다. 관리 실패가 과도한 계정은 속도가 제한되거나 정지될 수 있습니다. 콘텐츠 정책 준수를 자동화로 계획하세요.
- 예외 사례: 매우 복잡한 여러 인물의 퍼포먼스, 심하게 가려진 손, 또는 지나치게 양식화된 레퍼런스는 아티팩트(떨림, 부정확한 손 자세, 또는 표정 불일치)를 생성할 수 있습니다. 수동 정리 또는 하이브리드 파이프라인(경량 로토스코핑/키프레임 복구)이 여전히 필요할 수 있습니다.
- 모든 경우에 모션 캡처를 완전히 대체할 수는 없습니다. 2막은 짧은 장면과 프로토타입을 위한 많은 기존 설정을 대체할 수 있지만, 1밀리미터 이하의 정확도, 여러 배우의 물리적 상호 작용 또는 현장 타이밍 동기화가 필요한 하이엔드 영화/CGI 파이프라인은 여전히 마커 시스템/퍼포먼스 캡처 단계에 의존하게 됩니다.
일반적인 사용 사례
- 가상 제작 및 사전 검토 — 모션캡처 단계 없이 빠른 차단 및 연기 테스트.
- 인디 게임 및 애니메이션 프로토타이핑 — 짧은 장면을 위한 빠른 캐릭터 모션 생성.
- 광고 및 소셜 콘텐츠 — 저렴하고 빠르게 캐릭터 광고와 애니메이션 인재를 제작합니다.
- VFX 삽입 및 모션 교체 — 배우의 촬영 장면을 바탕으로 양식화된 캐릭터를 구현하여 기존 영상을 보강합니다.
다른 현재 솔루션과의 비교
2막 vs 피카랩스 / 카이버 / 소라 (상위 레벨)
- 2막 (런웨이): 뛰어나다 캐릭터의 성능 충실도 (머리/얼굴/몸/손) 단일 주행 클립 짧은 비디오를 위한 패러다임과 간단한 API 통합, 몇 초 분량의 출력에 대한 예측 가능한 크레딧 가격.
- 피카랩스: 유연한 즉흥적 비디오 변환과 스타일 전환이 강조되는 경우가 많습니다. 타겟형 성능 전환보다는 일반적인 비디오 생성과 스타일화에 더 중점을 둘 수 있습니다.
- 카이버: 강한 스타일 변환, 음악 기반 비주얼 및 일반 장면 생성하지만 반드시 캐릭터별 모션 캡처 충실도에 특화된 것은 아닙니다.
- 소라(및 유사한 프리미엄 VFX 파이프라인): 영화적 품질과 확장된 장면 생성에 중점을 둡니다. 긴 시퀀스와 영화 VFX에 더 적합하지만 리소스가 많이 필요하고 신속한 프로토타입에는 접근성이 떨어질 수 있습니다.
전화하는 방법 2막 CometAPI의 API
필수 단계
- 에 로그인 코메타피닷컴. 아직 당사 사용자가 아니신 경우 먼저 등록해 주시기 바랍니다.
- 인터페이스의 액세스 자격 증명 API 키를 받으세요. 개인 센터의 API 토큰에서 "토큰 추가"를 클릭하고 토큰 키(sk-xxxxx)를 받아 제출하세요.
- 이 사이트의 url을 받으세요: https://api.cometapi.com/
사용 방법
- "
act_twoAPI 요청을 전송하고 요청 본문을 설정하는 엔드포인트입니다. 요청 메서드와 요청 본문은 웹사이트 API 문서에서 확인할 수 있습니다. 웹사이트에서는 사용자의 편의를 위해 Apifox 테스트도 제공합니다. - 바꾸다 귀하 계정의 실제 CometAPI 키를 사용합니다.
- 질문이나 요청을 콘텐츠 필드에 입력하세요. 모델이 이에 응답합니다.
- . API 응답을 처리하여 생성된 답변을 얻습니다.
CometAPI는 완벽한 호환성을 갖춘 REST API를 제공하여 원활한 마이그레이션을 지원합니다. 주요 세부 정보는 다음과 같습니다. API doc:
- 종점 :
https://api.cometapi.com/runwayml/v1/character_performance - 모델 매개 변수 :
act_two - 입증:
Bearer YOUR_CometAPI_API_KEY - 컨텐츠 타입:
application/json.
curl --location --request POST 'https://api.cometapi.com/runwayml/v1/character_performance' \
--header 'X-Runway-Version: 2024-11-06' \
--header 'Authorization: {{api-key}}' \
--header 'Content-Type: application/json' \
--data-raw '{
"character": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"reference": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"bodyControl": true,
"expressionIntensity": 3,
"seed": 4294967295,
"model": "act_two",
"ratio": "1280:720",
"contentModeration": {
"publicFigureThreshold": "auto"
}
}'