Akt_to er Runways næste generation AI-ydeevneregistrering og karakter animation værktøj: den indtager en kort køreegenskaber (et webcam- eller telefonvideo af en person, der spiller en scene) plus en karakterreference (billede eller video) og genererer en animeret karakterpræstation, der overfører krops-, ansigtsudtryks- og håndbevægelser til karakteren. Act-Two tilbydes i Runways webprodukt og som en model tilgængelig gennem API-økosystemet.
Introduktion til Act-Two-modellen
akt_to er designet til at demokratisere high-fidelity animation ved at omdanne korte "kørselspræstations"-klip til fuldt animerede karaktersekvenser. Modellen fokuserer på udtryksfuld troskab — overførsel af ansigtsmikroudtryk, læbe- og mundbevægelser, finger-/håndbevægelser og fuldkropsholdning — samtidig med at det tilføjer plausible miljøbevægelse når det indtastede tegn er et billede. akt_to er positioneret som en videreudvikling af Runways tidligere Act-modeller og er tæt integreret i Runways Gen-4 videoværktøjssæt og API.
hvad akt to gør
- Overførsel af præstationer i hele kroppen: kortlægger hoved, ansigt, torso og hænder fra en enkelt kørevideo til en karakterreference.
- Fleksibilitet ved tegnindtastning: accepterer enten et tegn billede eller referencevideo som mål.
- Gesture Control: Når du bruger et karakterbillede, kan du styre hånd-/kropsbevægelser gennem styreclipsen og justere bevægelsespåvirkningen.
- Automatisk miljøbevægelse: tilføjer subtil baggrunds-/miljøbevægelse for billedbaserede tegn for at undgå "svævende" resultater.
Tekniske detaljer og opgavebegrænsninger
Indgange
- Køreevne: en video, der indeholder skuespillerpræstationen (bevægelse, gestik, lyd).
- Karakterreference: enten et stillbillede eller en video af den figur, du vil have animeret. ()
Output og formater
Understøttede billedformater og opløsninger inkluderer 1280×720 (16:9), 720×1280 (9:16), 960×960 (1:1) og et lille sæt andre forudindstillinger; 24 FPS er standard billedhastigheden for output. Der er automatisk beskæring for at matche mål for billedformat.
Behandlingsnoter: De bedste resultater opnås, når køreoplevelsen og karakteren vender i samme generelle retning og optager lignende skærmplads; input med ekstreme perspektivforskelle eller motiver med meget fjerne/lav opløsning kan give forringede resultater. Runways modererings- og indholdsfiltre gælder for uploadede aktiver; opgaver kan blive afvist, hvis indholdet overtræder politikken.
Begrænsninger og kendte fejltilstande
- Kortvarigt fokus: akt_to er optimeret til korte klip (Minimum 3 sekunder; typiske arbejdsgange bruger under 30 sekunder). Til mocap-optagelser i funktionslængde skal du stadig bruge traditionelle optagelses- eller chunkede arbejdsgange.
- Moderering / indholdssikkerhed: Runways moderering kan blokere eller mislykkes opgaver for markerede input; konti med for mange modereringsfejl kan blive hastighedsbegrænset eller suspenderet. Planlæg overholdelse af indholdspolitikker i automatiseringen.
- Kantsager: Ekstremt komplekse flerpersonspræstationer, meget okkluderede hænder eller ultra-stiliserede referencer kan producere artefakter (jitter, forkerte håndpositurer eller uoverensstemmelser i udtryk). Manuel oprydning eller hybride pipelines (lethånds rotoskopi / reparation af keyframes) kan stadig være påkrævet.
- Ikke en fuld erstatning for motion-capture i alle tilfælde: Mens Act-Two kan erstatte mange traditionelle opsætninger til korte scener og prototyping, vil high-end film/CGI-pipelines, der kræver præcision på under en millimeter, flere skuespillere, der interagerer fysisk, eller timingsynkronisering på settet, stadig være afhængige af markørsystemer/performance capture-scener.
Typiske brugssager
- Virtuel produktion og previs — hurtige blokerings- og virkningstests uden en mocap-fase.
- Indie-spil og animationsprototyping — hurtig generering af karakterbevægelser til korte scener.
- Reklamer og indhold på sociale medier — producere karakterspots og animerede talenter billigt og hurtigt.
- VFX-indsættelser og bevægelseserstatning — forbedre eksisterende optagelser ved at drive en stiliseret karakter fra en skuespillers tagning.
Sammenligning med andre nuværende løsninger
akt_to vs Pika Labs / Kaiber / Sora (højt niveau)
- Akt to (catwalk): udmærker sig ved præstationsnøjagtighed for karakterer (hoved/ansigt/krop/hænder) med en enkelt køreklemme paradigme og ligetil API-integration til korte videoer; forudsigelig kreditprissætning for sekunders output.
- Pika Labs: ofte fremhævet for fleksibel prompt-til-video og stiloverførsel; kan fokusere mere på generel videogenerering og stilisering snarere end målrettet performanceoverførsel.
- Kaiber: stærk ved stiltransformationer, musikdrevne visuelle elementer og generel scenegenerering, men ikke nødvendigvis lige så specialiseret i mocap-nøjagtighed pr. karakter.
- Sora (og lignende premium VFX-pipelines): orienteret mod filmisk kvalitet og udvidet scenegenerering; stærkere til lange sekvenser og film VFX, men mere ressourcekrævende og muligvis mindre tilgængelig til hurtige prototyper.
Sådan ringer du Akt to API fra CometAPI
Påkrævede trin
- Log ind på cometapi.com. Hvis du ikke er vores bruger endnu, bedes du registrere dig først
- Få adgangslegitimations-API-nøglen til grænsefladen. Klik på "Tilføj token" ved API-tokenet i det personlige center, få token-nøglen: sk-xxxxx og send.
- Hent url'en til dette websted: https://api.cometapi.com/
Brug metoden
- Vælg "
act_two” endepunkt for at sende API-anmodningen og indstille anmodningsteksten. Forespørgselsmetoden og anmodningsteksten er hentet fra vores websteds API-dokument. Vores websted tilbyder også Apifox-test for din bekvemmelighed. - Erstatte med din faktiske CometAPI-nøgle fra din konto.
- Indsæt dit spørgsmål eller din anmodning i indholdsfeltet – det er det, modellen vil reagere på.
- . Behandle API-svaret for at få det genererede svar.
CometAPI leverer en fuldt kompatibel REST API – til problemfri migrering. Vigtige detaljer til API-dok:
- Endpoint:
https://api.cometapi.com/runwayml/v1/character_performance - Modelparameter:
act_two - Godkendelse:
Bearer YOUR_CometAPI_API_KEY - Indholdstype:
application/json.
curl --location --request POST 'https://api.cometapi.com/runwayml/v1/character_performance' \
--header 'X-Runway-Version: 2024-11-06' \
--header 'Authorization: {{api-key}}' \
--header 'Content-Type: application/json' \
--data-raw '{
"character": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"reference": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"bodyControl": true,
"expressionIntensity": 3,
"seed": 4294967295,
"model": "act_two",
"ratio": "1280:720",
"contentModeration": {
"publicFigureThreshold": "auto"
}
}'