Orkas Orkas
ดาวน์โหลด GitHub
หน้าแรก บล็อก ทำงานตัดต่อวิดีโอให้เป็นอัตโนมัติ
เวิร์กโฟลว์

วิธีทำให้การตัดต่อวิดีโอเป็นอัตโนมัติ

มีงานสามแบบซ่อนอยู่ในวลีเดียวนี้ ต่อไปนี้คือส่วนที่ทำอัตโนมัติได้จริง ส่วนที่ยังต้องให้มนุษย์ทำ และขั้นตอนรวบรวมหลักฐานที่ต้องมาก่อนการตัดทุกครั้ง

“ทำงานตัดต่อวิดีโอให้เป็นอัตโนมัติ” ครอบคลุมงานสามแบบ และความผิดหวังส่วนใหญ่เกิดจากการปะปนกัน การระบุให้ชัดว่าหมายถึงแบบไหนคือส่วนใหญ่ของงานนี้

สรุปสั้น ๆ ทำขั้นตอนเชิงกลให้เป็นอัตโนมัติ แต่เก็บการตัดสินใจตัดต่อไว้ สกัดหลักฐานจากฟุตเทจก่อน อ่านรายการตัดสินใจตัดต่อ อนุมัติ แล้วจึงเรนเดอร์ เครื่องมือที่เรนเดอร์ตรงจากพรอมป์ต์ทำให้การเดาเป็นอัตโนมัติ ไม่ใช่การตัดต่อ
ดาวน์โหลด Orkas — ฟรี

สามงานในวลีเดียว

การแปลงด้วยสคริปต์ ffmpeg, moviepy, ลูปเชลล์ ปรับขนาดไฟล์ทั้งโฟลเดอร์ ต่อคลิป ปรับความดังให้เป็นมาตรฐาน ฝังไฟล์คำบรรยายลงวิดีโอ ให้ผลแน่นอน ไม่ต้องใช้วิจารณญาณ และใช้ได้มานานยี่สิบปีแล้ว หากคุณต้องการเพียงเท่านี้ ก็ไม่จำเป็นต้องใช้โมเดล

ระบบควบคุมที่วางแผนและลงมือทำ มีระบบอ่านฟุตเทจของคุณ เสนอแผนตัดต่อ และดำเนินการหลังจากคุณยอมรับ นี่คือส่วนที่ใหม่ และเป็นส่วนที่บทความนี้พูดถึง

ควบคุมโปรแกรมตัดต่อที่คุณมีอยู่แล้ว Premiere, Resolve, Final Cut ผ่าน API ที่แอปพลิเคชันนั้นเปิดให้ใช้ แบบนี้มีข้อจำกัดจากผู้ผลิตแทนที่จะเป็นเครื่องมือของคุณ: สิ่งที่ทำอัตโนมัติได้คือสิ่งที่ส่วนเชื่อมต่อสคริปต์ของผู้ผลิตอนุญาตพอดี และส่วนเชื่อมต่อนั้นเปลี่ยนไปตามรุ่น รวมถึงระหว่างระดับฟรีกับเสียเงิน

แต่ละแบบล้มเหลวด้วยเหตุผลต่างกัน และเครื่องมือที่เก่งแบบแรกไม่ได้เก่งแบบที่สองโดยอัตโนมัติ

เส้นแบ่งที่นักตัดต่อขีดไว้เอง

ควรอ่านสิ่งที่นักตัดต่อพูดเมื่อเรื่องนี้ถูกหยิบขึ้นมา เพราะพวกเขาระบุได้แม่นยำกว่าการตลาด คำตอบที่ได้คะแนนโหวตสูงสุดในกระทู้ r/VideoEditing ล่าสุดเกี่ยวกับการตัดต่อด้วย AI กล่าวไว้อย่างตรงไปตรงมาว่า คุณค่าที่คุณมอบให้คือ การรู้ว่าควรตัดต่ออะไร ไม่ใช่การควบคุมซอฟต์แวร์. ในกระทู้ DaVinci Resolve ที่พูดถึงเรื่องเดียวกัน คนที่บ่นหนักที่สุดเรื่องการยัด AI เข้าเครื่องมือตัดต่อก็ขีดเส้นแบ่งของตัวเองโดยไม่มีใครถาม — การถอดเสียง การทำโรโตสโคป การลบวัตถุ การทำความสะอาดเสียง การติดตามวัตถุ งานซ้ำซากน่าเบื่อ: ใช้ได้ ถ้าช่วยประหยัดเวลา

นี่คือข้อกำหนดที่นำไปใช้ได้ ขั้นตอนเชิงกลทำอัตโนมัติได้ แต่การตัดสินใจ — จะตัดอะไร ตัดเมื่อไร เทคไหนถ่ายทอดช่วงเวลานั้นได้ — ทำไม่ได้ และเครื่องมือที่แสร้งว่าทำได้จะสร้างงานที่คุณต้องกลับมาทำใหม่

หลักฐานต้องมาก่อนการตัด

ความผิดพลาดที่พบบ่อยคือสั่งตรงไปยังผลลัพธ์: “ทำคลิปรวมไฮไลต์จากอันนี้” โมเดลยังไม่ได้ดูฟุตเทจ มันกำลังอนุมานโครงสร้างจากประโยคของคุณ

ขั้นตอนที่แก้ปัญหานี้ไม่หวือหวา ก่อนตัดสิ่งใด ให้สกัดสิ่งที่อยู่ในไฟล์จริง ๆ ออกมา:

  • บทถอดเสียงพร้อมเวลา — และป้ายระบุผู้พูดเมื่อมีมากกว่าหนึ่งคนพูด
  • ขอบเขตฉาก — จุดที่ช็อตเปลี่ยนจริง ๆ
  • ช่วงเงียบ — ช่วงที่ไม่มีใครพูด ตามเกณฑ์ที่คุณกำหนด
  • ตัวบ่งชี้ปัญหาคุณภาพ — เสียงแตกจากระดับสัญญาณเกิน ช่วงที่ค่าแสงไม่เหมาะสม เฟรมค้าง

ตอนนี้รายการตัดต่อกลายเป็นการตัดสินใจบนข้อมูลแทนการเดา และที่สำคัญกว่าคือมันตรวจทานได้ คุณอ่านเหตุผลที่เลือกแต่ละช่วงได้ก่อนเสียเวลาเรนเดอร์

วางแผน อนุมัติ ประกอบ

สิ่งที่สองที่แยกระบบอัตโนมัติที่ใช้งานได้จริงออกจากลูกเล่นโชว์คือ แผนเป็นชิ้นงานที่แยกจากการลงมือทำ

พูดให้ชัดคือ การทำงานจะสร้างรายการตัดสินใจตัดต่อก่อน — ทุกช่วง ไฟล์ต้นทาง จุดเข้าและจุดออก และสิ่งที่เกิดขึ้นทับบนช่วงนั้น คุณอ่านรายการนั้น และจะเรนเดอร์ก็ต่อเมื่อคุณอนุมัติแล้ว การแยกเช่นนี้ให้ผลสามอย่าง ความผิดพลาดทำให้คุณเสียเวลาอ่านแทนเวลาเรนเดอร์ รายการสามารถเปรียบเทียบความเปลี่ยนแปลงได้ รอบที่สองจึงแก้เพียงสี่ช่วงแทนการทำใหม่ทั้งหมด และเมื่อผลลัพธ์ผิด คุณจะแยกได้ว่าแผนผิดหรือการดำเนินการผิด ซึ่งเป็นข้อบกพร่องคนละแบบและต้องแก้ต่างกัน

หากเครื่องมือเรนเดอร์ตรงจากพรอมป์ต์โดยไม่มีสิ่งกลางทางให้ตรวจทาน มันทำให้การเดาเป็นอัตโนมัติ ไม่ใช่การตัดต่อ

สิ่งที่ทำอัตโนมัติไม่ได้

  • เรื่องราวและรสนิยม นักตัดต่อสองคนใช้ฟุตเทจเดียวกันเล่าเรื่องได้สองเรื่อง ความแตกต่างนั้นแหละคืองาน
  • ทุกสิ่งที่ต้องอ่านอารมณ์ของผู้ชม เทคไหนตลกกว่า ช่วงหยุดไหนยาวได้อย่างมีเหตุผล
  • ผลงานที่เป็นเสียงอย่างเดียวหรือบทถอดเสียงอย่างเดียว ควรพูดให้ชัดเพราะเป็นการใช้ผิดงานที่พบบ่อย: กระบวนการผลิตวิดีโอไม่ใช่บริการถอดเสียง และการใช้อย่างหนึ่งแทนอีกอย่างจะให้ผลลัพธ์แย่กว่าเครื่องมือที่สร้างมาเฉพาะงาน

คุยเรื่องต้นทุนอย่างตรงไปตรงมา

นักตัดต่อหยิบเรื่องนี้ขึ้นมาก่อนเรื่องคุณภาพ และพวกเขาคิดถูก ทุกอย่างที่ขับเคลื่อนด้วยโมเดลมีต้นทุนต่อรอบ และฟุตเทจยาวมีค่าใช้จ่ายในการตรวจดูสูง การสกัดหลักฐานครั้งเดียวแล้วใช้ซ้ำในหลายรอบไม่ได้แค่เป็นระเบียบกว่า — มันเป็นปัจจัยส่วนใหญ่ที่ทำให้เวิร์กโฟลว์หนึ่งยังถูกใช้ต่อ ขณะที่อีกอันถูกทิ้งหลังเห็นบิลแรก เลือกขั้นตอนที่ให้ผลแน่นอนทุกครั้งที่ขั้นตอนแบบนั้นทำงานได้เพียงพอ

ใช้งานใน Orkas

Orkas มี VideoStudio ซึ่งทำงานตามลำดับนี้พอดี: หลักฐานจากฟุตเทจ ตามด้วยรายการตัดสินใจตัดต่อข้ามสื่อ จากนั้นผ่านด่านอนุมัติ แล้วจึงประกอบแบบให้ผลแน่นอน — ภาพ กราฟิกซ้อนทับ เสียงบรรยาย คำบรรยาย การตรวจความดัง มันเป็นโอเพนซอร์สและทำงานบนเครื่องของคุณ และเดสก์ท็อปเดียวกันยังควบคุม CLI เขียนโค้ดที่คุณติดตั้งไว้แล้วได้ด้วย งานตัดต่อกับงานสคริปต์จึงเป็นงานประเภทเดียวกันแทนที่จะต้องใช้สองเครื่องมือแยกกัน ดูขั้นตอนตามสถานการณ์ได้ที่ กรณีใช้งานเวิร์กโฟลว์การผลิตวิดีโอ.

สิ่งที่ตั้งใจไม่ทำ: ส่งมอบผลลัพธ์เป็นเสียงอย่างเดียวหรือบทถอดเสียงอย่างเดียว หรือเรนเดอร์สิ่งใดก่อนที่คุณจะอนุมัติแผน