runwayml_character_performance

Thông số kỹ thuật của runwayml-character-performance

runwayml-character-performance là gì?

runwayml-character-performance là định danh nền tảng của CometAPI cho quy trình tạo biểu diễn nhân vật của Runway, thường được Runway mô tả là Act-Two. Mô hình được xây dựng để hoạt ảnh hóa một nhân vật từ clip diễn xuất của con người: bạn cung cấp một video diễn xuất điều khiển của người đang diễn, cùng với hình ảnh hoặc video nhân vật, và hệ thống sẽ chuyển chuyển động khuôn mặt, biểu cảm, nhịp lời thoại và chuyển động cơ thể vào một cảnh nhân vật được tạo.

Mô hình này được thiết kế cho các quy trình sáng tạo cần hoạt ảnh nhân vật nhanh mà không cần thiết lập motion-capture truyền thống. Runway mô tả đây là cách để thổi hồn vào nhân vật với chuyển động, lời thoại và biểu cảm chân thực, đồng thời hỗ trợ cả nhân vật không phải con người và nhiều phong cách hình ảnh. Khi nhân vật mục tiêu là hình tĩnh, hệ thống cũng có thể tổng hợp chuyển động môi trường để cảnh quay tự nhiên hơn.

Trên CometAPI, năng lực này được cung cấp qua điểm cuối biểu diễn nhân vật của Runway, phù hợp cho các đội sản phẩm, công cụ sáng tạo, quy trình dựng thử và quy trình truyền thông tự động muốn truy cập lập trình vào hoạt ảnh nhân vật dựa trên diễn xuất. (cometapi.com)

Tính năng chính của runwayml-character-performance

• Chuyển diễn xuất: Ánh xạ phần diễn xuất của một người từ video nguồn lên nhân vật đích, bao gồm chuyển động khuôn mặt, biểu cảm và chuyển động cơ thể tổng thể.
• Đầu vào nhân vật linh hoạt: Chấp nhận hình ảnh hoặc video nhân vật, cho phép nhà phát triển cân đối giữa kiểm soát chuyển động và bảo toàn bối cảnh cảnh quay.
• Điều khiển cử chỉ cho nhân vật dựa trên hình ảnh: Khi dùng hình ảnh nhân vật, mô hình có thể chuyển cử chỉ và tư thế cơ thể từ clip diễn xuất, giúp hoạt ảnh biểu cảm hơn.
• Hoạt ảnh hình ảnh nhận biết bối cảnh: Với đầu vào là hình tĩnh, hệ thống tự động thêm chuyển động môi trường hoặc chuyển động kiểu camera để kết quả không bị tĩnh hoặc thiếu tự nhiên.
• Quy trình video giữ nguyên bối cảnh: Khi đầu vào nhân vật là video, kết quả tạo ra giữ nguyên chủ thể, bối cảnh và chuyển động camera gốc đồng thời áp dụng chuyển diễn xuất khuôn mặt.
• Biểu cảm khuôn mặt có thể điều chỉnh: Hỗ trợ điều khiển cường độ biểu cảm, cho phép cân bằng giữa mức chuyển diễn xuất mạnh và độ ổn định, nhất quán về hình ảnh.
• Tùy chọn đầu ra thân thiện với sản xuất: Hỗ trợ nhiều tỷ lệ khung hình và độ phân giải phổ biến ở 24 FPS, dùng được cho định dạng ngang, dọc, vuông và điện ảnh cho mạng xã hội/video.
• Tối ưu cho hoạt ảnh dạng ngắn: Phù hợp nhất với clip ngắn, tối thiểu 3 giây và tối đa 30 giây, đáp ứng nhu cầu quảng cáo, clip mạng xã hội, đoạn hội thoại, dựng thử và cảnh mẫu.

Cách truy cập và tích hợp runwayml-character-performance

Bước 1: Đăng ký API Key

Đăng nhập CometAPI. Nếu chưa có tài khoản, hãy đăng ký trước. Sau đó mở trang cá nhân, tạo API token và sao chép khóa để xác thực cho các yêu cầu tiếp theo. CometAPI cung cấp mô hình này qua hạ tầng API tương thích Runway. (cometapi.com)

Bước 2: Gửi yêu cầu tới API runwayml-character-performance

Sử dụng điểm cuối biểu diễn nhân vật của Runway trên CometAPI và đặt trường model thành runwayml-character-performance ở lớp ứng dụng của bạn. Luồng yêu cầu bên dưới dùng tuyến biểu diễn nhân vật với đầu vào JSON cho video diễn xuất điều khiển, tài sản nhân vật, điều khiển chuyển động và thiết lập đầu ra. (cometapi.com)

curl --location --request POST 'https://api.cometapi.com/runwayml/v1/character_performance' \
  --header 'X-Runway-Version: 2024-11-06' \
  --header 'Authorization: Bearer YOUR_COMETAPI_API_KEY' \
  --header 'Content-Type: application/json' \
  --data-raw '{
    "character": {
      "type": "video",
      "uri": "https://your-file-host.example/character.mp4"
    },
    "reference": {
      "type": "video",
      "uri": "https://your-file-host.example/performance.mp4"
    },
    "bodyControl": true,
    "expressionIntensity": 3,
    "seed": 4294967295,
    "model": "runwayml-character-performance",
    "ratio": "1280:720",
    "contentModeration": {
      "publicFigureThreshold": "auto"
    }
  }'

Bước 3: Nhận và kiểm tra kết quả

Sau khi gửi, hãy xử lý phản hồi API trong backend hoặc ứng dụng khách và kiểm tra xem kết quả tạo ra có khớp với thời lượng, khung hình và chất lượng biểu cảm mong đợi hay không. Trong thực tiễn, bạn cũng nên xác minh rằng tài nguyên đầu vào tuân theo thực hành tốt nhất của Runway — footage diễn xuất rõ ràng với một chủ thể, khuôn mặt nhìn rõ, khung hình ổn định và tham chiếu nhân vật phù hợp — để cải thiện độ tin cậy của đầu ra. (cometapi.com)