Stability AI เปิดตัว Stable Virtual Camera เทคโนโลยีสร้างวิดีโอ 3D จากภาพนิ่ง 2D

Stability AI ได้เปิดตัวโมเดล AI ที่สร้างความเปลี่ยนแปลงครั้งใหญ่ชื่อ Stable Virtual Camera ซึ่งสามารถแปลงภาพ 2D ให้กลายเป็นวิดีโอ 3D ที่มีความลึกและมุมมองสมจริง เทคโนโลยีนวัตกรรมนี้ใช้วิธีการ multi-view diffusion ช่วยให้ผู้ใช้สามารถสร้างวิดีโอแบบไดนามิกจากภาพนำเข้าได้ตั้งแต่ 1 ถึง 32 ภาพ โมเดลนี้รองรับอัตราส่วนภาพหลากหลายและสามารถผลิตวิดีโอได้ยาวถึง 1,000 เฟรม ทำให้เป็นความก้าวหน้าที่สำคัญในวงการภาพยนตร์ดิจิทัลและแอนิเมชัน 3D

Stable Virtual Camera มีฟีเจอร์ควบคุมกล้องขั้นสูง ซึ่งรวมถึงการกำหนดเส้นทางโดยผู้ใช้และเส้นทางสำเร็จรูป 14 แบบ เช่น แบบ 360 องศา, แบบเกลียว และแบบ Dolly Zoom ความยืดหยุ่นนี้ช่วยให้สามารถจำลองการเคลื่อนไหวของกล้องที่ซับซ้อนได้ เป็นการเพิ่มพลังให้ครีเอเตอร์ในการสร้างภาพแนวคิดได้แม่นยำยิ่งขึ้น และปรับแต่งเนื้อหาตามความต้องการด้านศิลปะและการเล่าเรื่อง โมเดลนี้ทำผลงานได้ยอดเยี่ยมในการทดสอบ novel view synthesis โดยทำผลงานได้ดีกว่าโมเดลที่เทียบเคียงกันอย่าง ViewCrafter และ CAT3D

ปัจจุบัน Stable Virtual Camera มีให้ใช้สำหรับการวิจัยที่ไม่ใช่เชิงพาณิชย์ภายใต้ใบอนุญาตที่สามารถเข้าถึงได้บนแพลตฟอร์มอย่าง GitHub และ Hugging Face แม้จะแสดงความสามารถที่น่าประทับใจ แต่โมเดลนี้ยังประสบความท้าทายกับฉากที่ซับซ้อน โดยเฉพาะอย่างยิ่งฉากที่มีลวดลายเคลื่อนไหวหรือมุมมองที่แตกต่างกันมาก ข้อจำกัดเหล่านี้ชี้ให้เห็นถึงพื้นที่สำหรับการพัฒนาและปรับปรุงในอนาคต

การเปิดตัว Stable Virtual Camera ถือเป็นก้าวสำคัญในเทคโนโลยีการสร้างวิดีโอ โดยมีการประยุกต์ใช้ที่อาจเกิดขึ้นในการทำภาพยนตร์ แอนิเมชัน และความเป็นจริงเสมือน แม้จะเผชิญกับความท้าทายในช่วงที่ผ่านมา Stability AI กำลังฟื้นตัวด้วยการลงทุนใหม่และการร่วมมือเชิงกลยุทธ์ รวมถึงการแต่งตั้ง James Cameron เข้าร่วมในคณะกรรมการบริษัท เทคโนโลยีนี้มีแนวโน้มที่จะทำให้การสร้างวิดีโอ 3D เป็นที่แพร่หลายและเปลี่ยนแปลงกระบวนการสร้างเนื้อหาแบบดั้งเดิม

ที่มา: TechCrunch