Akt_drugi to następna generacja Runwaya Przechwytywanie wydajności AI oraz animacja postaci narzędzie: pobiera krótki wydajność jazdy (nagranie z kamery internetowej lub telefonu przedstawiające kogoś odgrywającego scenę) plus odniesienie do postaci (obraz lub wideo) i generuje animowany występ postaci, który przenosi na nią ciało, mimikę twarzy i ruchy rąk. Akt drugi jest oferowany w ramach produktu internetowego Runway oraz jako model dostępny za pośrednictwem ekosystemu API.
Wprowadzenie do modelu Aktu Drugiego
akt_dwa ma na celu demokratyzację animacji wysokiej jakości poprzez przekształcanie krótkich klipów „występów na drodze” w w pełni animowane sekwencje postaci. Model koncentruje się na ekspresyjna wierność — przenoszenie mikrowyrazów twarzy, ruchu warg i ust, gestów palców/dłoni i postawy całego ciała — a także dodawanie wiarygodnych ruch środowiskowy gdy wprowadzanym znakiem jest obraz. akt_dwa jest pozycjonowany jako ewolucja wcześniejszych modeli Act firmy Runway i jest ściśle zintegrowany z zestawem narzędzi wideo i interfejsem API firmy Runway Gen-4.
co robi akt drugi
- Całkowity transfer mocy ciała: mapuje głowę, twarz, tułów i dłonie z pojedynczego filmu przedstawiającego jazdę samochodem do odniesienia do postaci.
- Elastyczność wprowadzania znaków: akceptuje albo znak obraz lub film referencyjny jako cel.
- Kontrola gestów: podczas korzystania z obrazu postaci można sterować gestami rąk/ciała za pomocą klipu sterującego i dostosowywać wpływ gestów.
- Automatyczny ruch środowiskowy: dodaje subtelny ruch tła/otoczenia dla postaci opartych na obrazie, aby uniknąć efektu „unoszenia się”.
Szczegóły techniczne i ograniczenia zadań
Wejścia
- Wydajność jazdy: film zawierający występ aktorski (ruch, gesty, dźwięk).
- Odniesienie do postaci: nieruchomy obraz lub wideo postaci, którą chcesz animować. ()
Wyjścia i formaty
Obsługiwane współczynniki proporcji i rozdzielczości obejmują: 1280×720 (16:9), 720×1280 (9:16), 960×960 (1:1) i mały zestaw innych ustawień wstępnych; 24 FPS to standardowa liczba klatek na sekundę dla wyjść. Jest automatyczne przycinanie aby dopasować docelowe proporcje obrazu.
Notatki dotyczące przetwarzania: Najlepsze rezultaty uzyskuje się, gdy osiągi i charakter kierowcy są zwrócone w tym samym kierunku i zajmują podobną przestrzeń na ekranie; dane wejściowe o skrajnie niedopasowanej perspektywie lub obiekty o bardzo odległej/niskiej rozdzielczości mogą dawać gorsze rezultaty. Moderacja i filtry treści Runway mają zastosowanie do przesłanych zasobów; zadania mogą zostać odrzucone, jeśli treść narusza zasady.
Ograniczenia i znane tryby awarii
- Krótkotrwałe skupienie: akt_dwa jest zoptymalizowany pod kątem krótkie klipy (minimum 3 sekundy; typowe procesy pracy trwają poniżej 30 sekund). Do pełnometrażowych filmów mocap nadal potrzebne będą tradycyjne metody przechwytywania lub podzielone na fragmenty procesy.
- Moderacja / bezpieczeństwo treści: Moderacja Runway może blokować lub odrzucać zadania dla oznaczonych danych wejściowych; konta z nadmierną liczbą niepowodzeń moderacji mogą zostać ograniczone lub zawieszone. Zaplanuj zgodność z zasadami dotyczącymi treści w ramach automatyzacji.
- Przypadki skrajne: Niezwykle złożone występy wieloosobowe, mocno zamaskowane dłonie lub ultrastylizowane odniesienia mogą powodować artefakty (drżenie, nieprawidłowe ułożenie dłoni lub niedopasowanie wyrazu twarzy). Nadal może być konieczne ręczne czyszczenie lub hybrydowe metody (rotoskopia lighthand / naprawa klatek kluczowych).
- Nie zawsze jest to pełne zastąpienie technologii przechwytywania ruchu: podczas gdy Akt Drugi może zastąpić wiele tradycyjnych konfiguracji dla krótkich scen i prototypów, zaawansowane procesy filmowe/CGI wymagające dokładności poniżej milimetra, fizycznej interakcji wielu aktorów lub synchronizacji czasowej na planie nadal będą polegać na systemach znaczników/etapach przechwytywania ruchu.
Typowe przypadki użycia
- Wirtualna produkcja i wizualizacja — szybkie testy blokowania i działania bez etapu mocap.
- Prototypowanie gier niezależnych i animacji — szybkie generowanie ruchu postaci w krótkich scenach.
- Reklamy i treści społecznościowe — szybko i tanio produkować spoty reklamowe i animowane talenty.
- Wstawianie efektów wizualnych i zastępowanie ruchu — rozbuduj istniejący materiał filmowy, kreując wystylizowaną postać na podstawie ujęcia aktora.
Porównanie z innymi obecnymi rozwiązaniami
akt_dwa vs Pika Labs / Kaiber / Sora (wysoki poziom)
- Akt drugi (wybieg): wyróżnia się wierność odwzorowania postaci (głowa/twarz/ciało/dłonie) z pojedynczy klips do jazdy paradygmat i prosta integracja API dla krótkich filmów; przewidywalne naliczanie opłat za sekundy materiału wyjściowego.
- Laboratoria Pika: często podkreślane ze względu na elastyczność w przenoszeniu komunikatów na wideo i stylów; może koncentrować się bardziej na ogólnym generowaniu wideo i stylizacji niż na docelowym przenoszeniu wydajności.
- Kaiber: silny w zmiany stylu, wizualizacje oparte na muzyce i ogólne generowanie scen, ale niekoniecznie tak wyspecjalizowane pod względem wierności obrazu mocap dla każdego znaku.
- Sora (i podobne strumienie efektów wizualnych premium): zorientowany na jakość kinową i generowanie rozszerzonych scen; lepszy w przypadku długich sekwencji i efektów wizualnych, ale wymagający większych zasobów i prawdopodobnie mniej dostępny w przypadku szybkich prototypów.
Jak zadzwonić Akt drugi API z CometAPI
Wymagane kroki
- Zaloguj się do pl.com. Jeśli jeszcze nie jesteś naszym użytkownikiem, zarejestruj się najpierw
- Pobierz klucz API uwierzytelniania dostępu do interfejsu. Kliknij „Dodaj token” przy tokenie API w centrum osobistym, pobierz klucz tokena: sk-xxxxx i prześlij.
- Uzyskaj adres URL tej witryny: https://api.cometapi.com/
Użyj metody
- Wybierz "
act_two” punkt końcowy do wysłania żądania API i ustawienia treści żądania. Metoda żądania i treść żądania są pobierane z naszej witryny internetowej API doc. Nasza witryna internetowa udostępnia również test Apifox dla Twojej wygody. - Zastępować za pomocą aktualnego klucza CometAPI ze swojego konta.
- Wpisz swoje pytanie lub prośbę w polu treści — model odpowie właśnie na tę wiadomość.
- . Przetwórz odpowiedź API, aby uzyskać wygenerowaną odpowiedź.
CometAPI zapewnia w pełni kompatybilne API REST, co umożliwia bezproblemową migrację. Kluczowe szczegóły Dokumentacja API:
- Punkt końcowy:
https://api.cometapi.com/runwayml/v1/character_performance - Parametr modelu:
act_two - Poświadczenie:
Bearer YOUR_CometAPI_API_KEY - Typ zawartości:
application/json.
curl --location --request POST 'https://api.cometapi.com/runwayml/v1/character_performance' \
--header 'X-Runway-Version: 2024-11-06' \
--header 'Authorization: {{api-key}}' \
--header 'Content-Type: application/json' \
--data-raw '{
"character": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"reference": {
"type": "video",
"uri": "https://filesystem.site/cdn/20250818/wAKbHUoj5EHyqZvEdJbFXn10wXBMUn.mp4"
},
"bodyControl": true,
"expressionIntensity": 3,
"seed": 4294967295,
"model": "act_two",
"ratio": "1280:720",
"contentModeration": {
"publicFigureThreshold": "auto"
}
}'