AI ของ Nvidia สร้างวิดีโอแบบช้าๆที่น่าเหลือเชื่อโดยการกรอกเฟรมแบบพิเศษ

การสร้างภาพเคลื่อนไหวช้าเป็นเรื่องเกี่ยวกับการจับภาพจำนวนมากต่อวินาที หากคุณไม่บันทึกเพียงพอแล้วเมื่อวิดีโอของคุณช้าลงก็จะหายเร็วและไม่สามารถมองเห็นได้ เว้นแต่ว่านั่นคือคุณใช้ปัญญาประดิษฐ์เพื่อจินตนาการเฟรมพิเศษด้วย AI ของ Nvidia

งานวิจัยชิ้นใหม่ของ Nvidia ได้ใช้ Deep learning เพื่อเปลี่ยนภาพวิดีโอ 30 เฟรมต่อวินาทีเป็นภาพเคลื่อนไหวที่สวยงาม 240 เฟรมต่อวินาที โดยพื้นฐานแล้วระบบ AI จะมองไปที่เฟรมต่างๆสองเฟรมและสร้างวิดีโอตัวกลางโดยการติดตามการเคลื่อนที่ของวัตถุจากกรอบหนึ่งไปเป็นเฟรมต่อไป ไม่เหมือนกับการนึกภาพจริง ๆ ในภาพเหมือนด้วยสมองของมนุษย์ แต่จะให้ผลลัพธ์ที่ถูกต้อง (แต่ไม่สมบูรณ์แบบ)
กระบวนการนี้จะต้องมีการปรับแต่งก่อนจึงจะสามารถใช้งานได้ในเชิงพาณิชย์ แต่เมื่อปรับปรุงให้ดีขึ้นสามารถนำมาใช้เพื่อเพิ่มผลการเคลื่อนไหวช้าลงในภาพจากสมาร์ทโฟนหลังจากได้รับการบันทึกแล้ว
“ในขณะที่มีความเป็นไปได้ที่จะใช้วิดีโอ 240 เฟรมต่อวินาทีด้วยโทรศัพท์มือถือการบันทึกทุกอย่างในอัตราเฟรมสูงทำได้ไม่สมจริงเนื่องจากต้องใช้หน่วยความจำขนาดใหญ่และใช้พลังงานสูงสำหรับอุปกรณ์เคลื่อนที่” นักวิจัยกล่าวในรายงาน อธิบายงานของพวกเขาบนเซิร์ฟเวอร์ pre-print arXiv “ด้วยเหตุผลเหล่านี้และคนอื่น ๆ การสร้างภาพเคลื่อนไหวช้าที่มีคุณภาพสูงจากวิดีโอที่มีอยู่เป็นเรื่องที่น่าสนใจเป็นอย่างมาก”

มีข้อ จำกัด อยู่ ในตอนเริ่มต้นนักวิจัยต้องฝึกอบรมระบบ Deep learning เพื่อจัดการกับภาพวิดีโอที่เฉพาะเจาะจง ดังนั้นเพื่อลดการลื่นไถลรถลงไปในน้ำพวกเขาจึงต้องฝึกให้เป็นภาพแรกในวิดีโอที่คล้ายกัน การทำเช่นนี้อาจ จำกัด นอกจากนี้ยังควรสังเกตด้วยว่าเทคนิคดังกล่าวไม่สามารถสร้างเฟรมตัวกลางได้ไม่ จำกัด จำนวน หากไม่มีข้อมูลจะเป็นไปไม่ได้ที่คอมพิวเตอร์จะทำนายการเคลื่อนไหวและการทำงานของวัตถุในโลกแห่งความเป็นจริง อย่างไรก็ตามระบบของ Nvidia สามารถผลิตได้ถึงเจ็ดเฟรมตัวกลาง

เทคนิคของ Nvidia มีลักษณะที่เร็วและง่ายกว่าวิธีการที่มีอยู่ในปัจจุบันสำหรับการสร้างภาพเคลื่อนไหวช้าๆ เราคาดหวังให้เห็นคุณลักษณะต่างๆเช่นนี้ไปปรากฏในกล้องในโทรศัพท์ของคุณในอนาคตอันใกล้นี้

Leave a Reply

Your email address will not be published. Required fields are marked *

%d bloggers like this: