Seedance 2.0 Text to Video API

Seedance 2.0 Text to Video คือโมเดล text-to-video ที่ก้าวหน้าที่สุดของ ByteDance ออกแบบมาเพื่อแปลงพรอมต์ข้อความเพียงคำสั่งเดียวให้กลายเป็นวิดีโอภาพยนตร์ที่พร้อมแชร์ ในขณะที่เครื่องมือสร้างวิดีโอหลายตัวผลิตเพียงช็อตเงียบๆ เดียว Seedance 2.0 สร้างฉากสมบูรณ์พร้อมเสียงซิงค์ในตัว การตัดต่อหลายช็อต ฟิสิกส์โลกจริงที่น่าเชื่อถือ และการควบคุมกล้องระดับผู้กำกับ — ทั้งหมดนี้สร้างขึ้นพร้อมกันจากคำอธิบายของคุณ

หัวใจหลักของโมเดลคือการอ่านพรอมต์ของคุณเหมือนบทภาพยนตร์สั้น คุณสามารถอธิบายไม่ใช่แค่ว่าเกิดอะไรขึ้น แต่ยังรวมถึงการดำเนินเรื่องข้ามช็อตต่างๆ ด้วย ตัวอย่างเช่น พรอมต์อย่าง "ปลาหมึกตัวหนึ่งพบลูกฟุตบอลในมหาสมุทรและเรียกเพื่อนปลาหมึกมาด้วยความตื่นเต้นเพื่อมาเล่น จากนั้นตัดไปที่การแข่งฟุตบอลปลาหมึกใต้ทะเล" จะสร้างคลิปที่ตัดฉากจริงๆ จัดการแอคชั่นข้ามหลายช็อต แทนที่จะยึดทุกอย่างไว้ในเฟรมนิ่งเดียว ความสามารถหลายช็อตนี้ทำให้สามารถสตอรี่บอร์ดเรื่องสั้นได้ในเจนเนอเรชันเดียว

คุณสมบัติเด่นคือเสียงในตัว โดยค่าเริ่มต้น โมเดลสร้างซาวด์แทร็กซิงค์พร้อมภาพ รวมถึงเอฟเฟกต์เสียง เสียงพื้นหลังแอมเบียนต์ และคำพูดที่ปากขยับตรงกับบทสนทนา นั่นหมายความว่าตัวละครสามารถพูดได้โดยการขยับปากตรงกับบท สภาพแวดล้อมมีบรรยากาศสมจริง และแอคชั่นมีเอฟเฟกต์เสียงที่เหมาะสม — ไม่ต้องทำเสียงแยก หากต้องการคลิปเงียบเพื่อใส่เพลงเอง สามารถปิดการสร้างเสียงได้

Seedance 2.0 เน้นฟิสิกส์โลกจริง ทำให้การเคลื่อนไหวเหมือนฟุตเทจจริง: น้ำไหล วัตถุตกและชนกันอย่างสมเหตุสมผล และการเคลื่อนไหวมีน้ำหนักแทนที่จะลอยหรือลื่นแบบไม่เป็นธรรมชาติ รวมกับการควบคุมกล้องระดับผู้กำกับ คุณสามารถกำหนดอารมณ์ของช็อต — การเคลื่อนกล้องกว้าง การจัดเฟรมที่ตั้งใจ และแอคชั่นไดนามิก — โดยอธิบายในพรอมต์

ตัวเลือกความละเอียดและรูปแบบ

โมเดลรองรับความละเอียด输出หลากหลายเพื่อให้ตรงกับความต้องการและขั้นตอนการทำงาน คุณสามารถเลือก 480p สำหรับการสร้างเร็วขณะทดลองไอเดีย 720p เป็นค่าเริ่มต้นสมดุล 1080p สำหรับงานคุณภาพสูง หรือ 4K สำหรับความคมชัดสูงสุด ช่วงนี้ช่วยให้ร่างคอนเซปต์เร็วที่ความละเอียดต่ำ แล้วเรนเดอร์เวอร์ชันขัดเกลาที่ความละเอียดสูง

อัตราส่วนภาพยืดหยุ่นเต็มที่ เลือก 16:9 สำหรับแนวนอนมาตรฐาน 9:16 สำหรับแนวตั้ง/พอร์เทรตที่เหมาะกับมือถือและฟีดโซเชียล 1:1 สำหรับโพสต์สี่เหลี่ยม 4:3 หรือ 3:4 สำหรับเฟรมคลาสสิก หรือ 21:9 สำหรับลุคภาพยนตร์อัลตร้าไวด์ หากไม่อยากเลือก ตัวเลือกอัตโนมัติจะให้โมเดลเลือกเฟรมที่เหมาะกับพรอมต์ที่สุด

ความยาวคลิปปรับได้เช่นกัน ตั้งได้ตั้งแต่ 4 ถึง 15 วินาที หรือให้โมเดลเลือกความยาวอัตโนมัติตามที่พรอมต์อธิบาย — สะดวกเมื่อฉากต้องการพื้นที่หายใจมากขึ้นหรือบีทสั้นๆ ก็พอ

สำหรับคุณภาพไฟล์สุดท้าย มีตัวควบคุมคุณภาพไฟล์ ค่ามาตรฐานให้ไฟล์ขนาดปกติ ขณะที่ตัวเลือกคุณภาพสูงสร้างไฟล์ที่สมบูรณ์กว่าและใหญ่กว่า — มีประโยชน์เมื่อต้องการความชัดเจนสูงสุดสำหรับส่งมอบหรือแก้ไขต่อ

เหมาะสำหรับใคร

Seedance 2.0 เหมาะสำหรับนักทำภาพยนตร์และครีเอเตอร์วิดีโอที่ต้องการโปรโตไทป์ฉาก แอนิเมติก หรือลำดับสั้นเต็มรูปแบบโดยไม่ต้องใช้กล้องหรือทีม Social media creators และนักการตลาดสามารถสร้างคลิปแนวตั้งหรือสี่เหลี่ยมที่ปรับให้เหมาะกับแพลตฟอร์มแต่ละแห่ง พร้อมเสียงครบ Designer และศิลปินนำคอนเซปต์มาทำเป็นโมชัน สำรวจสไตล์และลุคเปลี่ยนแปลง เพราะโมเดลจัดการตัด กล้อง และเสียงในพาสเดียว จึงมีค่ามากสำหรับผู้ที่ต้องการคลิปที่รู้สึกสมบูรณ์แทนฟุตเทจดิบที่ต้องประกอบทีหลัง

การควบคุมสร้างสรรค์สรุป

• Prompt: อธิบายฉาก แอคชั่น ตัวละคร บทสนทนา และการเปลี่ยนช็อตด้วยภาษาธรรมดา รายละเอียดภาพยนตร์มากเท่าไหร่ โมเดลยิ่งจัดฉากข้ามหลายช็อตได้ดี
• Resolution: แลกความเร็วกับความคมชัด — จากร่าง 480p เร็วๆ ไปจนถึงมาสเตอร์ 4K
• Duration: ล็อคความยาว 4-15 วินาที หรือให้โมเดลตัดสิน
• Aspect ratio: เลือกแนวนอน แนวตั้ง สี่เหลี่ยม หรือเฟรมภาพยนตร์อัลตร้าไวด์
• Audio: เปิดเสียงซิงค์สำหรับเอฟเฟกต์ แอมเบียนต์ และคำพูดปากตรง หรือปิดสำหรับคลิปเงียบ
• File quality: เลือกมาตรฐานหรือตัวเลือกคุณภาพสูงสำหรับไฟล์สุดท้าย

แนวปฏิบัติที่ดีที่สุด

เพราะโมเดลตอบสนองต่อโครงสร้างเรื่องราว การเขียนพรอมต์เหมือนลิสต์ช็อต — ระบุการเปลี่ยนฉากด้วยคำเช่น "cut to" — ช่วยให้ได้การตัดต่อหลายช็อตที่เด่น ขณะทดลอง สร้างที่ความละเอียดต่ำและสั้นเพื่อสำรวจไอเดียเร็ว แล้วรีเรนเดอร์ตัวโปรดที่ 1080p หรือ 4K ด้วยตัวเลือกคุณภาพสูงสำหรับส่งมอบ หากต้องการบทสนทนา ให้ใส่บรรทัดตรงในพรอมต์เพื่อให้โมเดลซิงค์ปาก และเมื่อเฟรมสำคัญสำหรับแพลตฟอร์มเฉพาะ ตั้งอัตราส่วนภาพชัดเจนแทนการใช้อัตโนมัติ

แต่ละเจนเนอเรชันยังคืนค่า seed ที่ใช้สร้างด้วย เพื่อติดตามผลขณะทำซ้ำ ด้วยการผสมผสานภาพภาพยนตร์ เสียงซิงค์ โมชันโลกจริง และการเล่าเรื่องหลายช็อต Seedance 2.0 แปลงไอเดียเขียนให้เป็นคลิปวิดีโอบรรยากาศสมบูรณ์ในขั้นตอนเดียว