Movie Gen dari Meta mengungguli model terkemuka dalam tolok ukur, mempertahankan struktur dan realisme video di berbagai tugas pengeditan.

Meta telah meluncurkan Movie Gen, model AI canggih yang dirancang untuk menghasilkan video 1080p dengan audio yang tersinkronisasi. Sistem ini dapat mengedit video berdasarkan instruksi, sehingga memungkinkan pembuatan konten yang dipersonalisasi menggunakan gambar yang disediakan pengguna.

Dengan model transformer yang berisi 30 miliar parameter, Movie Gen dapat menghasilkan video berdurasi 16 detik pada 16 frame per detik. Teknik canggih model ini meningkatkan realisme gerakan video, yang dilatih pada lebih dari 100 juta pasangan video-teks dan 1 miliar pasangan gambar-teks.

Movie Gen mengungguli model sebelumnya, termasuk Runway Gen3 dan OpenAI Sora, terutama dalam tugas penyuntingan video dan mengubah teks menjadi video. Tolok ukur menunjukkan keunggulannya dalam mempertahankan struktur video dan detail halus, terutama dalam pengujian TGVE+.

Pengembangan Movie Gen di masa mendatang meliputi peningkatan pemahaman adegan, perlindungan terhadap penyalahgunaan, dan menjadikan sistem lebih mudah diakses. Meta membayangkan aplikasi di media sosial, produksi film, dan kampanye pemasaran.