Thông số kỹ thuật của runway-video2video
| Thông số | Chi tiết |
|---|---|
| ID mô hình | runway-video2video |
| Nhà cung cấp | Runway |
| Loại mô hình | Tạo video từ video / biến đổi video theo phong cách |
| Chức năng chính | Biến đổi một video đầu vào thành video đầu ra mới được dẫn hướng bằng prompt văn bản, và trong một số quy trình bởi ảnh tham chiếu hoặc khung hình đầu tiên. |
| Năng lực nền tảng của Runway | Thường gắn với quy trình Video to Video của Runway trên Gen-3 Alpha và Gen-3 Alpha Turbo, trong khi hướng dẫn mới hơn của Runway khuyến nghị người dùng sử dụng Gen-4 Aleph cho khả năng video-to-video mới nhất. |
| Loại đầu vào | Yêu cầu video đầu vào; prompt văn bản được dùng để định hướng biến đổi. Tài liệu của Runway cũng mô tả tạo kiểu được hướng dẫn bằng ảnh trong các quy trình video. |
| Đầu ra | Clip video được AI biến đổi |
| Thời lượng được hỗ trợ | Quy trình video-to-video của Gen-3 hỗ trợ clip lên tới 20 giây cho quy trình được tham chiếu. |
| Độ phân giải đầu ra | 1280×768 và, với các biến thể được hỗ trợ, 768×1280. |
| Kích thước đầu vào tối đa | 64 MB trong quy trình Gen-3 video-to-video được tham chiếu. |
| Truy cập | Có sẵn thông qua tích hợp dựa trên API và các quy trình trên nền tảng của Runway. Runway công bố tài liệu API riêng. |
runway-video2video là gì?
runway-video2video là định danh mô hình của CometAPI cho khả năng tạo video từ video của Runway, một quy trình nhận một đoạn video hiện có và kết xuất lại thành phong cách hình ảnh mới hoặc diễn giải dựa trên chuyển động bằng hướng dẫn từ prompt. Trong thực tế, điều này được dùng cho tạo phong cách, biến đổi cảnh, phát triển look, VFX thử nghiệm, và biến tư liệu thô thành các kết quả mang tính điện ảnh hoặc giàu tưởng tượng hơn.
Tài liệu trợ giúp của Runway mô tả Video to Video như một cách để thay đổi phong cách video bằng prompt văn bản hoặc dùng ảnh đầu vào làm khung hình đầu tiên. Hướng dẫn sản phẩm gần đây cũng cho thấy rằng dù Gen-3 Alpha và Turbo hỗ trợ quy trình này, khuyến nghị mới của Runway hướng người dùng tới công cụ thế hệ mới cho các trường hợp sử dụng video-to-video mới nhất. Ở góc độ tích hợp với CometAPI, runway-video2video là ID mô hình trên nền tảng bạn dùng để truy cập nhóm khả năng này.
Tính năng chính của runway-video2video
- Tạo dựa trên video: Bắt đầu từ video đầu vào hiện có thay vì tạo chuyển động từ đầu, hữu ích để giữ cấu trúc cú máy, nhịp thời gian và bố cục trong khi thay đổi kết quả thị giác.
- Biến đổi dựa trên prompt: Sử dụng hướng dẫn ngôn ngữ tự nhiên để kiểm soát phong cách đầu ra, tâm trạng, tái diễn giải chủ thể hoặc định hướng hiệu ứng thị giác.
- Chuyển phong cách và kết xuất sáng tạo: Phù hợp để chuyển đổi tư liệu thành xử lý hình ảnh dạng hoạt hình, điện ảnh, siêu thực hoặc theo định danh thương hiệu mà không cần chỉnh sửa thủ công từng khung. Đây là suy luận dựa trên quy trình tạo phong cách video-to-video được Runway mô tả.
- Quy trình có nhận biết tham chiếu: Tài liệu Runway cho thấy hỗ trợ hướng dẫn có tham chiếu bằng ảnh trong các luồng tạo video liên quan, giúp định hướng bố cục hoặc đảm bảo nhất quán thẩm mỹ.
- Tùy chọn đầu ra dọc và ngang: Các quy trình được hỗ trợ bao gồm định dạng ngang và dọc tiêu chuẩn, hữu ích cho nhu cầu mạng xã hội, di động và tiếp thị.
- Hiệu quả cho sản xuất dạng ngắn: Quy trình tham chiếu hỗ trợ clip dài tối đa 20 giây, phù hợp với sáng tạo quảng cáo, shot ý tưởng, bài đăng mạng xã hội và các chu trình lặp nhanh.
- Khả năng truy cập qua API: Runway cung cấp tài liệu API và mẫu truy cập mô hình, cho phép tích hợp lập trình vào ứng dụng sáng tạo, công cụ nội bộ và pipeline media tự động.
Cách truy cập và tích hợp runway-video2video
Bước 1: Đăng ký để lấy khóa API
Bắt đầu bằng cách đăng ký trên CometAPI và tạo khóa API từ bảng điều khiển. Sau khi có khóa, hãy lưu trữ an toàn và dùng để xác thực các yêu cầu tới endpoint của CometAPI.
Bước 2: Gửi yêu cầu tới API runway-video2video
Sử dụng định dạng API chính thức của Runway thông qua CometAPI. Endpoint là POST /runwayml/v1/video_to_video. Cần bao gồm header X-Runway-Version.
curl https://api.cometapi.com/runwayml/v1/video_to_video \
-H "Content-Type: application/json" \
-H "Authorization: Bearer $COMETAPI_API_KEY" \
-H "X-Runway-Version: 2024-11-06" \
-d '{
"model": "gen4_aleph",
"videoUri": "https://example.com/your-source-video.mp4",
"promptText": "Transform this footage into a cinematic neon-lit sci-fi sequence with dramatic atmosphere and smooth motion.",
"seed": 1,
"ratio": "1280:720",
"references": [],
"contentModeration": {
"publicFigureThreshold": "auto"
}
}'
import os, requests
resp = requests.post(
"https://api.cometapi.com/runwayml/v1/video_to_video",
headers={
"Authorization": f"Bearer {os.environ['COMETAPI_API_KEY']}",
"Content-Type": "application/json",
"X-Runway-Version": "2024-11-06",
},
json={
"model": "gen4_aleph",
"videoUri": "https://example.com/your-source-video.mp4",
"promptText": "Transform this footage into a cinematic neon-lit sci-fi sequence.",
"seed": 1,
"ratio": "1280:720",
"references": [],
"contentModeration": {"publicFigureThreshold": "auto"},
},
)
print(resp.json())
Bước 3: Truy xuất và xác minh kết quả
API trả về một đối tượng tác vụ. Thăm dò endpoint trạng thái tác vụ để kiểm tra khi quá trình tạo video hoàn tất, sau đó truy xuất URL video đầu ra. Đối với môi trường sản xuất, hãy thêm cơ chế thử lại, thăm dò trạng thái và ghi log để đảm bảo tích hợp ổn định với runway-video2video.