Seedance 2.5 เครื่องมือสร้างวิดีโอด้วย AI

จุดเด่นของ Seedance 2.5

เทคยาวต่อเนื่องในช็อตเดียว

Seedance 2.5 ถือช็อตต่อเนื่องได้นานกว่า Seedance รุ่นก่อนมาก ByteDance บอกว่าตัวแบบหลักยังนิ่ง และเสียงยังตรงจังหวะตลอดทั้งเทค

ช็อตแบบเดินตามเส้นทางอย่างร้านเบเกอรี่ด้านบนจึงทำได้จริง: กล้องเริ่มที่เตาอบ ผ่านลูกมือที่กำลังปั้นแป้ง แล้วไปจบที่หน้าต่างร้านซึ่งลูกค้าคนแรกรออยู่

เขียนเส้นทางเป็นรายการสถานที่ตามลำดับที่กล้องไปถึง และบอกว่าแต่ละคนกำลังทำอะไรตอนกล้องผ่าน จุดเริ่มและจุดจบที่ชัดช่วยให้เทคยาวไม่หลงทาง

คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 เทกยาวสเตดิแคมต่อเนื่องที่เคลื่อนผ่านร้านเบเกอรี่ที่วุ่นวายยามเช้าตรู่ กล้องผ่านคนทำขนมปังที่กำลังดึงถาดขนมปังสีทองออกจากเตาอบแบบชั้น ลัดเลาะระหว่างโต๊ะที่โรยแป้งซึ่งเด็กฝึกงานสองคนกำลังปั้นแป้ง แล้วดันเข้าหาหน้าต่างหน้าร้านที่สว่างซึ่งลูกค้าคนแรกรออยู่ด้านนอกยามรุ่งสาง แสงเตาอบอุ่นตัดกับแสงสีฟ้าเย็นจากหน้าต่าง แป้งลอยในอากาศ ภาพเบลอจากการเคลื่อนไหวอย่างเป็นธรรมชาติ ดื่มด่ำ

เปลี่ยนเฉพาะบางส่วนของช็อต

ByteDance สร้าง Seedance 2.5 ให้แก้แบบเจาะจงได้: เปลี่ยนตัวละคร แอ็กชัน ฉากหลัง หรือช่วงเวลาหนึ่งในคลิป โดยส่วนอื่นยังต่อเนื่องเหมือนเดิม

ตัวอย่างท่าเรือแสดงแนวคิดนี้ เรือ เขื่อนกันคลื่น และอาคารยังเหมือนเดิม มีแค่ท้องฟ้าสีเทาเรียบที่กลายเป็นพระอาทิตย์ตกสีส้มม่วง และเงาสะท้อนบนน้ำก็เปลี่ยนตาม

ถ้าจะแก้ช็อต ให้ใส่คลิปเป็นวิดีโออ้างอิง บอกสิ่งที่จะเปลี่ยนแค่อย่างเดียว แล้วไล่รายการสิ่งที่ต้องคงเดิม

เทียบผลกับต้นฉบับก่อนนำไปแทน เพราะการเปลี่ยนอาจลามไปถึงส่วนใกล้เคียงในเฟรมได้

คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 เฟรมแบ่งครึ่งเปรียบเทียบช็อตท่าเรือเดียวกันที่มีเรือประมงและเขื่อนกันคลื่นหิน ครึ่งซ้าย เฟรมต้นฉบับที่ท้องฟ้าครึ้มสีเทาเรียบ ครึ่งขวา เฟรมเดียวกันทุกอย่างที่เปลี่ยนเฉพาะท้องฟ้าเป็นพระอาทิตย์ตกสีส้มอมม่วงอันตระการตา เงาสะท้อนบนผิวน้ำปรับให้เข้ากัน เรือและอาคารไม่เปลี่ยน รอยต่อตรงกลางเรียบร้อย

ใช้ภาพ วิดีโอ และเสียงเป็นข้อมูลอ้างอิง

Seedance 2.5 รับข้อมูลอ้างอิงหลายประเภทในการสร้างครั้งเดียว:

• ภาพสำหรับตัวละครและสถานที่
• คลิปวิดีโอสำหรับการเคลื่อนไหวหรือภาษากล้อง
• เสียงสำหรับจังหวะหรือเสียงพูด

บอร์ดตัวอย่างแสดงว่าทั้งหมดรวมกันอย่างไร: ภาพสเก็ตช์ดินสอของผู้หญิงผ้าพันคอแดง รูปหน้าผา แถบเฟรมฟิล์ม และคลื่นเสียง ทั้งหมดป้อนเข้าช็อตที่เสร็จสมบูรณ์ช็อตเดียว

บอกในพรอมต์ว่าแต่ละไฟล์ใช้ทำอะไร เช่น “ผู้หญิงจากภาพ 1 บนหน้าผาจากภาพ 2 เคลื่อนไหวแบบคลิปอ้างอิง” โมเดลจะได้ไม่ผสมปนกัน

แผงสเปกแสดงว่าแต่ละประเภทใส่ได้กี่ไฟล์

คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 ผนังห้องตัดต่อที่แสดงบอร์ดอ้างอิง ภาพสเก็ตช์ตัวละครด้วยดินสอเป็นผู้หญิงผ้าพันคอสีแดง ภาพถ่ายสถานที่ที่พิมพ์ออกมาเป็นหน้าผาริมทะเล แถบเฟรมฟิล์ม และรูปคลื่นเสียงที่พิมพ์ออกมา เชื่อมด้วยเส้นด้ายไปยังจอภาพขนาดใหญ่ที่แสดงเฟรมภาพยนตร์ที่เสร็จแล้วของผู้หญิงคนเดิมบนหน้าผานั้นยามรุ่งสาง ห้องสลัวที่มีแสงจากจอ สีน้ำเงินและสีแดงเป็นจุดเด่น ไม่มีตัวอักษรที่อ่านออก

วิธีเขียนพรอมต์สำหรับ Seedance 2.5

1. เขียนเทคยาวเป็นเส้นทาง: กล้องเริ่มที่ไหน ผ่านอะไร และหยุดที่ไหน ตามลำดับนั้น

2. ถ้ามีหลายช็อตในคลิปเดียว ให้ใส่เลขแต่ละจังหวะ เช่น “ช็อต 1: ห้องแต่งตัว ช็อต 2: ทางเดิน ช็อต 3: เวที” และให้แต่ละช็อตมีตัวแบบ แอ็กชัน และการเคลื่อนกล้อง

3. บอกโมเดลว่าข้อมูลอ้างอิงแต่ละชิ้นใช้ทำอะไร “ใบหน้าจากภาพ 1 สถานที่จากภาพ 2 การเคลื่อนกล้องจากวิดีโอ” ได้ผลดีกว่าแนบไฟล์โดยไม่พูดถึงเลย

4. ระบุแสงและการเปลี่ยนของแสงตลอดเทค เช่น “แสงอุ่นจากเตาอบ แล้วเป็นแสงรุ่งเช้าโทนเย็นที่หน้าต่าง” ลุคจะได้คงที่ขณะกล้องเคลื่อนที่

5. ทดสอบการเคลื่อนไหวที่ 4 วินาทีและความละเอียดต่ำก่อนจ่ายกับเทกเต็มความยาว ถ้าแค่ต้องการให้ภาพนิ่งภาพเดียวขยับ เครื่องมือทำภาพเคลื่อนไหว เป็นทางที่เร็วกว่า

พรอมต์ตัวอย่างสำหรับลองกับ Seedance 2.5

• 

  รถรางผ่านเมืองหิมะ

  คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 ช็อตดอลลี่ช้า ๆ ไปตามทางเดินของรถรางวินเทจที่กำลังแล่นผ่านเมืองที่หิมะตกยามพลบค่ำ ผู้โดยสารในโค้ทขนสัตว์นั่งข้างหน้าต่างที่มีไอฝ้า เด็กคนหนึ่งใช้นิ้ววาดบนกระจก ไฟถนนพุ่งผ่านด้านนอกเป็นเส้นเบลอ หิมะกำลังตก แสงสีฟ้าเย็นด้านนอกตัดกับหลอดไฟสีเหลืองอุ่นด้านใน เกรนฟิล์ม

• 

  ลำแสงประภาคารกลางพายุ

  คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 ภาพมุมกว้างของประภาคารบนแหลมหินระหว่างพายุยามค่ำคืน ลำแสงกวาดผ่านเฟรมทะลุสายฝนที่กระหน่ำ คลื่นยักษ์แตกกระจายใส่โขดหินแบบสโลว์โมชัน โทนสีน้ำเงินอมเทาเข้ม แสงเป็นลำในสายฝน ดราม่าและเต็มไปด้วยการเคลื่อนไหว

• 

  ว่าวเหนือเนินทราย

  คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 ช็อตแทร็กมุมต่ำที่เคลื่อนไปพร้อมเด็กหญิงที่วิ่งข้ามเนินทรายสีอ่อน ดึงว่าวสีส้มหางยาวขึ้นสูงสู่ท้องฟ้ายามเช้าที่แจ่มใส ทรายที่เท้าเธอเตะขึ้นหยุดนิ่งกลางอากาศ หางว่าวพลิ้วไหว กล้องเคลื่อนเร็วพร้อมภาพเบลอเล็กน้อยที่หญ้าด้านหน้า ท้องฟ้าสีฟ้าเย็นและทรายสีอุ่น

• 

  สายลมบนดาดฟ้าเรือเฟอร์รี

  คีย์เฟรมวิดีโอสไตล์ภาพยนตร์ 16:9 ช็อตกล้องโคจรช้า ๆ รอบผู้หญิงในเสื้อพีโค้ทสีกรมท่าที่ยืนอยู่ที่ราวดาดฟ้าเรือเฟอร์รีบนทะเลสีเทา ลมพัดผมพาดใบหน้า นกนางนวลลอยตัวอยู่ด้านหลัง ร่องคลื่นท้ายเรือทอดยาวไปถึงเกาะที่อยู่ไกลออกไป โทนสีน้ำเงินเหล็กหม่น แสงนุ่มจากฟ้าครึ้ม ภาพเบลอเล็กน้อยที่ฉากหลัง

ภาพตัวอย่างใช้เพื่อประกอบคำอธิบายเท่านั้น ผลลัพธ์จริงแตกต่างกันไปตามโมเดล

สเปกและราคาของ Seedance 2.5

ราคาทั้งหมดด้านล่างดึงมาจากรายการราคาที่ใช้อยู่จริง เมื่อราคาเปลี่ยน หน้านี้ก็เปลี่ยนตามทันที เครดิตคิดตามจำนวนภาพ หรือตามจำนวนวินาทีของวิดีโอ

ข้อจำกัดของ Seedance 2.5

• ByteDance บอกว่าความสมจริงทางฟิสิกส์ของการเคลื่อนไหวที่ซับซ้อน และความนิ่งของฉากที่มีหลายตัวแบบปฏิสัมพันธ์กัน ยังต้องพัฒนาต่อ

  ฉากต่อสู้ คู่เต้นรำ และฝูงชนที่สัมผัสกันคือจุดที่แขนขาและมือมักผิด จึงควรตรวจเทคเหล่านั้นทีละเฟรม

• เทคยาวมีโอกาสเพี้ยนมากกว่า รายละเอียดเล็ก ๆ อย่างโลโก้ เครื่องประดับ หรือลายบนเสื้อโค้ต อาจเปลี่ยนไประหว่างต้นคลิปกับท้ายคลิป

  ตัวอักษรในเฟรมก็ยังไม่น่าเชื่อถือ ให้ใส่ชื่อเรื่องในโปรแกรมตัดต่อทีหลัง

• ข้อมูลอ้างอิงยิ่งมากไม่ได้ช่วยเสมอ ข้อมูลอ้างอิงสองชิ้นที่ขัดกัน เช่น พอร์ตเทรตที่แสงมาจากซ้ายกับสถานที่ที่แสงมาจากขวา จะดึงผลลัพธ์ไปคนละทาง

  การใช้ใบหน้าหรือเสียงของคนจริงเป็นข้อมูลอ้างอิงต้องได้รับอนุญาตจากเจ้าตัว