ข้อมูลจำเพาะทางเทคนิคของ runwayml-video-to-video
| ข้อมูลจำเพาะ | รายละเอียด |
|---|---|
| ID ของโมเดล | runwayml-video-to-video |
| ผู้ให้บริการ | Runway |
| ตระกูลโมเดล | Runway Gen-3 Alpha / Gen-3 Alpha Turbo Video to Video |
| กรณีการใช้งานหลัก | การปรับแต่งสไตล์และแปลงวิดีโอจากวิดีโออินพุตด้วย AI |
| ประเภทอินพุต | วิดีโอ พร้อมพรมต์ข้อความหรือภาพอ้างอิงเป็นตัวเลือก |
| ประเภทเอาต์พุต | วิดีโอที่สร้างขึ้น |
| ระยะเวลาที่รองรับ | สูงสุด 20 วินาที |
| ความละเอียดเอาต์พุต | 1280×768 และรองรับ 768×1280 บน Turbo ด้วย |
| อัตราเฟรม | 24 fps |
| ขนาดอินพุตสูงสุด | 64 MB |
| รูปแบบการเข้าถึง | การสร้างแบบอะซิงโครนัสผ่าน API/งาน |
| บันทึกแพลตฟอร์ม | Runway มีเอกสารสำหรับ Video to Video ในเวิร์กโฟลว์บนเว็บ และระบุว่า Gen-4 Aleph ที่ใหม่กว่าเป็นตัวเลือกล่าสุดสำหรับหมวดนี้ ขณะที่ Gen-3 Alpha/Turbo Video to Video ยังคงเป็นเวิร์กโฟลว์รุ่นก่อนที่มีเอกสารไว้ |
runwayml-video-to-video คืออะไร?
runwayml-video-to-video คือรหัสระบุบนแพลตฟอร์มของ CometAPI สำหรับความสามารถในการสร้างวิดีโอ-ต่อ-วิดีโอของ Runway เป็นเวิร์กโฟลว์ของโมเดลที่ออกแบบมาเพื่อแปลงวิดีโอที่มีอยู่ให้เป็นเวอร์ชันใหม่ที่มีการปรับสไตล์หรือการตีความใหม่ แทนที่จะสร้างการเคลื่อนไหวตั้งแต่ต้น ระบบจะเริ่มจากคลิปที่อัปโหลดและใช้การเปลี่ยนแปลงภาพที่ขับเคลื่อนด้วยพรมต์ โดยยังคงโครงสร้างการเคลื่อนไหวและจังหวะเวลาเดิมของฟุตเทจต้นทางไว้
Runway อธิบาย Video to Video ว่าเป็นวิธีเปลี่ยนสไตล์ของวิดีโอโดยใช้พรมต์ข้อความหรือภาพอินพุตเป็นแนวทางของเฟรมแรก ในทางปฏิบัติ โมเดลนี้จึงเหมาะสำหรับการเรนเดอร์ใหม่เชิงสร้างสรรค์ การปรับสไตล์เชิงภาพยนตร์ การเปลี่ยนอารมณ์ การทดลองด้านอาร์ตไดเรกชัน และการเปลี่ยนฟุตเทจดิบให้กลายเป็นผลงานที่ขัดเกลา หรือมีแนวคิดชัดเจนยิ่งขึ้น
โมเดลนี้อยู่ในกลุ่มผลิตภัณฑ์สร้างวิดีโอของ Runway ที่กว้างขึ้น เอกสารปัจจุบันของ Runway ระบุว่า Gen-4 Aleph เป็นตัวเลือกที่แนะนำรุ่นใหม่สำหรับการตัดต่อแบบวิดีโอ-ต่อ-วิดีโอ ในขณะที่ Gen-3 Alpha และ Gen-3 Alpha Turbo ยังคงเป็นการใช้งานในรุ่นก่อนสำหรับเวิร์กโฟลว์นี้ที่มีเอกสารไว้ นั่นหมายความว่า runwayml-video-to-video ควรถูกมองว่าเป็นโมเดลแปลงวิดีโอเชิงปฏิบัติสำหรับงานแปลงวิดีโอสไตล์ Runway ที่ตั้งหลักแล้ว มากกว่าที่จะเป็นระบบตัดต่อระดับเรือธงรุ่นล่าสุดในแคตตาล็อกของ Runway
คุณสมบัติหลักของ runwayml-video-to-video
- การสร้างที่ขับเคลื่อนด้วยวิดีโอ: เริ่มจากวิดีโอต้นฉบับที่อัปโหลด ทำให้เหมาะสำหรับการคงโครงสร้างการเคลื่อนไหวไว้ขณะเปลี่ยนรูปลักษณ์ สไตล์ หรือความงามของฉาก
- การปรับสไตล์ด้วยพรมต์: รองรับพรมต์ข้อความเพื่ออธิบายลุคเป้าหมาย ช่วยให้ผู้สร้างกำหนดโทน อัตลักษณ์ภาพ และสไตล์การแปลงได้
- การควบคุมด้วยภาพช่วยนำทาง: สามารถใช้ภาพเป็นแนวทางของเฟรมแรก ช่วยกำหนดองค์ประกอบหรือทิศทางภาพได้อย่างชัดเจนยิ่งขึ้น
- เวิร์กโฟลว์การผลิตแบบคลิปสั้น: รองรับคลิปยาวได้ถึง 20 วินาที เหมาะกับโฆษณา คอนเทนต์โซเชียล ช็อตคอนเซ็ปต์ และการลองไอเดียอย่างรวดเร็ว
- หลายระดับคุณภาพ/ต้นทุน: Runway มีเอกสารทั้งรุ่น Gen-3 Alpha และ Gen-3 Alpha Turbo โดย Turbo วางตำแหน่งเป็นตัวเลือกที่ประหยัดกว่า
- เอาต์พุตความละเอียดสูง: มีการระบุเอาต์พุตที่ 1280×768 และรองรับแนวตั้ง 768×1280 บน Turbo ช่วยให้ทำงานได้ทั้งแนวนอนและบางกรณีแนวตั้ง
- กรณีใช้งานด้านการตัดต่อเชิงสร้างสรรค์: เหมาะอย่างยิ่งสำหรับการถ่ายโอนสไตล์ การเรนเดอร์ฟุตเทจใหม่ การทำให้เห็นภาพคอนเซ็ปต์ และการทำให้ฟุตเทจที่ถ่ายมาเป็นเอาต์พุตที่ดูภาพยนตร์หรือมีเอกลักษณ์แบรนด์มากขึ้น ประเด็นนี้เป็นข้ออนุมานจากพฤติกรรมและเวิร์กโฟลว์ของ Video to Video ที่ Runway อธิบายไว้
วิธีเข้าถึงและผสานใช้ runwayml-video-to-video
ขั้นตอนที่ 1: ลงทะเบียนเพื่อรับ API Key
เพื่อเข้าถึง API ของ runwayml-video-to-video อันดับแรกให้สมัครบัญชีบน CometAPI และสร้าง API key จากแดชบอร์ด CometAPI มีเลเยอร์ API แบบรวมศูนย์ คุณจึงใช้กระบวนการจัดการบัญชีและคีย์เดียวกันกับโมเดลที่รองรับทั้งหมดได้
จัดเก็บ API key ของคุณอย่างปลอดภัยและโหลดจากตัวแปรสภาพแวดล้อมในระบบจริง ตัวอย่าง:
export COMETAPI_API_KEY="your_api_key_here"
ขั้นตอนที่ 2: ส่งคำขอไปยัง API ของ runwayml-video-to-video
เมื่อคุณมี API key แล้ว ให้ส่งคำขอไปยังปลายทางการสร้างของ CometAPI โดยใช้รหัสโมเดล runwayml-video-to-video
ตัวอย่างคำขอ:
curl https://api.cometapi.com/v1/responses \
-H "Authorization: Bearer $COMETAPI_API_KEY" \
-H "Content-Type: application/json" \
-d '{
"model": "runwayml-video-to-video",
"input": {
"video": "https://example.com/input-video.mp4",
"prompt": "Transform this clip into a cinematic neon-lit sci-fi scene with dramatic atmosphere"
}
}'
ขั้นตอนที่ 3: ดึงผลลัพธ์และตรวจสอบความถูกต้อง
หลังจากส่งคำขอแล้ว ให้ดึงผลการสร้างจากเพย์โหลดของการตอบกลับ API หรือโดยการโพลลิงปลายทาง job/status หากคำขอถูกประมวลผลแบบอะซิงโครนัส ตรวจสอบให้แน่ใจว่าเอาต์พุตที่ได้ตรงตามรูปแบบ ระยะเวลา และเจตนาการแปลงที่คุณร้องขอก่อนนำไปใช้ในเวิร์กโฟลว์จริง
การตรวจสอบทั่วไปได้แก่ ความพร้อมของเอาต์พุต ความครบถ้วนของการเรนเดอร์ ความสอดคล้องทางภาพ และการที่การปรับสไตล์สอดคล้องกับพรมต์และวิดีโอต้นฉบับหรือไม่