OpenAI เปิดตัวโมเดลสร้างวิดีโอตัวใหม่ Sora พร้อมตัวอย่างวิดีโอสุดล้ำ

เมื่อวันศุกร์ที่ผ่านมาบริษัทชั้นนำในการวงการ AI อย่างบริษัท OpenAI ได้เปิดตัว Sora ที่เป็นโมเดล AI ที่ใช้ในการสร้างวิดีโอที่สามารถสร้างวิดีโอได้สมจริงมาก โดยทาง OpenAI นั้นมีการเผยแพร่วิดีโอตัวอย่างที่สร้างมาจากโมเดล AI ตัวนี้ ในความละเอียดที่ต่างกัน และสไลต์ต่าง ๆ อีกทั้งยังสามารถปรับค่าความละเอียดได้อีกด้วย

โดยการฝึกสอน AI ตัวนี้สามารถใช้วิดีโอดิบเป็นอินพุตและเอาต์พุตการแสดงแฝงซึ่งถูกบีบอัดทั้งชั่วคราวและเชิงพื้นที่ Sora ได้รับการฝึกฝนและสร้างวิดีโอภายในพื้นที่แฝงที่ถูกบีบอัดนี้ในเวลาต่อมา นอกจากนี้ยังฝึกโมเดลตัวถอดรหัสที่เกี่ยวข้องซึ่งแมปจะสร้างค่าแฝงกลับไปยังพื้นที่พิกเซล

โดยความสามารถของ Sora นั้นสามารถสร้างวิดีโด โดยกำหนดระยะเวลา ความละเอียดของวิดีโอ และอัตราส่วนต่าง ๆ ได้ตามใจ ความยืดหยุ่นในการสุ่มตัวอย่างของSora สามารถสุ่มตัวอย่างวิดีโอไวด์สกรีน 1920x1080p, วิดีโอแนวตั้ง 1080x1920 และทุกอย่างที่อยู่ระหว่างนั้น ช่วยให้ Sora สร้างเนื้อหาสำหรับอุปกรณ์ต่างๆ ได้โดยตรงในอัตราส่วนภาพดั้งเดิม นอกจากนี้ยังช่วยให้เราสร้างต้นแบบเนื้อหาในขนาดที่ต่ำกว่าได้อย่างรวดเร็วก่อนที่จะสร้างที่ความละเอียดเต็ม และทั้งหมดนี้อยู่ในโมเดลเดียวกัน

สามารถปรับปรุงองค์ประกอบภายในวิดีโอในอัตราส่วนเท่าเดิม ปรับปรุงองค์ประกอบและจัดการเฟรมเรทที่มีความชัดมากขึ้น ใช้เทคนิคการเปลี่ยนคำบรรยายที่แนะนำใน DALL·E 3 ไปยังวิดีโอ ก่อนอื่นเราจะฝึกโมเดลคำบรรยายที่มีคำอธิบายสูง จากนั้นจึงใช้โมเดลนี้เพื่อสร้างคำบรรยายแบบข้อความสำหรับวิดีโอทั้งหมดในชุดการฝึกอบรม และสามารถสร้างภาพเคลื่อนไหวจาก DALL·E 3 สามารถขยายภาพระยะเวลาของวิดีโอจากวิดีโอเดิม แก้ไขรูปภาพและวิดีโอจากข้อความ และเชื่อวิดีโอระหว่าสองวิดีโออย่าลื่นไหลอีกด้วย

นอกจากนี้แล้ว Sora ยังสามารถสร้างโมเดล 3D เพื่อประกอบวิดีโอ และสามารถแสดงรายละเอียดได้มากขึ้น พร้อมกับจำลองโลกเสมอจริงได้อีกด้วย