runway-video2video техникалық сипаттамалары
| Техникалық сипаттама | Мәліметтер |
|---|---|
| Модель идентификаторы | runway-video2video |
| Провайдер | Runway |
| Модель түрі | Бейне-ден бейнеге генерация / стильдендірілген бейне түрлендіру |
| Негізгі функциясы | Енгізу бейнесін мәтіндік нұсқау арқылы, ал кейбір жұмыс процестерінде анықтамалық сурет немесе алғашқы кадр арқылы бағытталып, жаңа шығыс бейнеге түрлендіреді. |
| Сәйкес Runway мүмкіндігі | Gen-3 Alpha және Gen-3 Alpha Turbo-дегі Runway-дың Video to Video жұмыс процесімен жиі байланысты, ал Runway-дың жаңарақ ұсынымдары соңғы video-to-video мүмкіндіктері үшін пайдаланушыларды Gen-4 Aleph-ке бағыттайды. |
| Енгізу түрлері | Енгізу бейнесі міндетті; түрлендіруді бағыттау үшін мәтіндік нұсқау пайдаланылады. Runway құжаттамасы бейне жұмыс процестерінде суретке негізделген стильдеуді де сипаттайды. |
| Шығыс | AI арқылы түрлендірілген бейне клип |
| Қолдау көрсетілетін ұзақтықтар | Аталған жұмыс процесінде Runway-дың Gen-3 video-to-video жұмыс процесі ұзақтығы 20 секундқа дейінгі клиптерді қолдайды. |
| Шығыс ажыратымдылықтары | 1280×768 және, қолдау көрсетілетін нұсқалар үшін, 768×1280. |
| Енгізудің ең жоғарғы өлшемі | Аталған Gen-3 video-to-video жұмыс процесінде 64 MB. |
| Қол жеткізу | Runway арқылы API-негізді интеграция және платформадағы жұмыс процестері арқылы қолжетімді. Runway API құжаттамасын бөлек жариялайды. |
runway-video2video деген не?
runway-video2video — CometAPI-дің Runway-дың бейне-ден бейнеге генерациялау мүмкіндігіне арналған модель идентификаторы; бұл жұмыс процесі бар бейне клипті алып, мәтіндік нұсқауға негізделген бағыттауды пайдалана отырып, оны жаңа визуалды стильге немесе қимылға негізделген интерпретацияға қайта рендерлейді. Тәжірибеде бұл стильдеу, көріністі түрлендіру, визуалды бейнеқалып (look) әзірлеу, эксперименттік VFX және шикі түсірілімді неғұрлым кинематографиялық немесе қиялшыл нәтижелерге айналдыру үшін қолданылады.
Runway-дың анықтама құжаттамасы Video to Video-ны мәтіндік нұсқау немесе алғашқы кадр ретінде пайдаланылатын енгізу суреті арқылы бейнелердің стилін өзгерту әдісі ретінде сипаттайды. Жаңарақ өнімдік ұсынымдарында Gen-3 Alpha және Turbo бұл жұмыс процесін қолдағанымен, соңғы video-to-video пайдаланымдары үшін Runway пайдаланушыларды жаңа буын құралдарына бағыттайтынын да көрсетеді. Алайда CometAPI интеграциясы тұрғысынан алғанда, runway-video2video — осы санаттағы мүмкіндіктерге қол жеткізу үшін пайдаланылатын платформадағы модель идентификаторы.
runway-video2video негізгі мүмкіндіктері
- Бейнемен бағытталған генерация: Қозғалысты нөлден генерациялаудан гөрі бар бейне енгізуден бастайды, бұл көрнекі нәтижені өзгерте отырып, кадр құрылымын, таймингті және композицияны сақтауға мүмкіндік береді.
- Мәтіндік нұсқауға негізделген түрлендіру: Шығыс стильін, көңіл-күйін, нысанды қайта интерпретациялауын немесе визуалды эффект бағытын басқару үшін табиғи тілдегі нұсқауларды пайдаланады.
- Стильді көшіру және креативті қайта рендерлеу: Кадрларды қолмен кадр-кадр бойынша өңдемей-ақ, анимациялық, кинематографиялық, сюрреалистік немесе брендтік визуалды өңдеулерге айналдыруға өте қолайлы. Бұл Runway сипаттаған video-to-video стильдеу жұмыс процесіне негізделген тұжырым.
- Референске бағдарланған жұмыс процестері: Runway құжаттамасы тиісті бейне генерация ағымдарында суретке негізделген бағыттауды қолдайтынын көрсетеді, бұл композицияны немесе эстетикалық бірізділікті реттеуге көмектеседі.
- Тік және көлденең шығыс параметрлері: Қолдау көрсетілетін жұмыс процестеріне стандартты көлденең және тік шығыс пішімдері кіреді, бұл әлеуметтік, мобильді және маркетингтік жеткізілімдер үшін пайдалы.
- Қысқа форматтағы өндіріс тиімділігі: Аталған жұмыс процесі ұзақтығы 20 секундқа дейінгі қысқа клиптерді қолдайды, бұл жарнамалық креативтерге, концепт-кадрларға, әлеуметтік посттарға және жедел итерация конвейерлеріне сай келеді.
- API арқылы қолжетімділік: Runway API құжаттамасын және модельге қол жеткізу үлгілерін ұсынады, бұл креативті қолданбаларға, ішкі құралдарға және автоматтандырылған медиа конвейерлеріне бағдарламалық интеграциялауға мүмкіндік береді.
runway-video2video-ке қалай қол жеткізу және интеграциялау
1-қадам: API кілтін алу үшін тіркелу
Бастау үшін CometAPI-ге тіркеліп, басқару панелінен API кілтіңізді жасаңыз. Кілтті алғаннан кейін оны қауіпсіз сақтап, CometAPI endpoint-ке жіберілетін сұрауларды аутентификациялау үшін пайдаланыңыз.
2-қадам: runway-video2video API-ге сұраулар жіберу
CometAPI арқылы Runway-дың ресми API пішімін пайдаланыңыз. Endpoint: POST /runwayml/v1/video_to_video. X-Runway-Version HTTP тақырыбын қосуды ұмытпаңыз.
curl https://api.cometapi.com/runwayml/v1/video_to_video \
-H "Content-Type: application/json" \
-H "Authorization: Bearer $COMETAPI_API_KEY" \
-H "X-Runway-Version: 2024-11-06" \
-d '{
"model": "gen4_aleph",
"videoUri": "https://example.com/your-source-video.mp4",
"promptText": "Transform this footage into a cinematic neon-lit sci-fi sequence with dramatic atmosphere and smooth motion.",
"seed": 1,
"ratio": "1280:720",
"references": [],
"contentModeration": {
"publicFigureThreshold": "auto"
}
}'
import os, requests
resp = requests.post(
"https://api.cometapi.com/runwayml/v1/video_to_video",
headers={
"Authorization": f"Bearer {os.environ['COMETAPI_API_KEY']}",
"Content-Type": "application/json",
"X-Runway-Version": "2024-11-06",
},
json={
"model": "gen4_aleph",
"videoUri": "https://example.com/your-source-video.mp4",
"promptText": "Transform this footage into a cinematic neon-lit sci-fi sequence.",
"seed": 1,
"ratio": "1280:720",
"references": [],
"contentModeration": {"publicFigureThreshold": "auto"},
},
)
print(resp.json())
3-қадам: Нәтижелерді алу және тексеру
API тапсырма объектісін қайтарады. Бейне генерациясы аяқталғанын тексеру үшін тапсырма күйінің endpoint-ін кезең-кезеңімен сұраңыз, содан кейін шығыс бейненің URL-ін алыңыз. Өндірістік пайдалануда runway-video2video-пен сенімді интеграция үшін қайталап көру, күйді сұрау және журналдауды қосыңыз.