Meta’nın en son yapay zeka yeniliği olan Movie Gen, farklı medya türlerini üreten ve kullanıcıların modeller üzerinde daha yaratıcı kontrol sağlamasına imkan tanıyan bir koleksiyondur. Bu teknoloji, metinden videoya, metinden sese ve metinden görüntüye dönüşüm yapan temel modellerden oluşmaktadır.
Movie Gen Modelleri Hızlı Bakış
- Movie Gen Video Modeli: 30 milyar parametreli bu model, metin tabanlı istemlerden yüksek kaliteli videolar üretir.
- Movie Gen Ses Modeli: 13 milyar parametreli bu model, videolarla senkronize sesler ve müzikler oluşturabilir.
- Kişiselleştirilmiş Movie Gen Video Modeli: Metin istemi ve tek bir görüntüye dayalı olarak belirli kişilerin videolarını üretebilir.
- Movie Gen Edit Modeli: Gerçek ve kurgusal videolar için metin tabanlı detaylı düzenlemeler yapar.
Movie Gen Video Modelinin Eğitimi
Movie Gen Video modelinin eğitimi, öncelikle filtrelenmiş insan aktiviteleri içeren görsel verilerin toplanması ve hazırlanmasıyla başladı. Metin başlıkları, görsel hikaye anlatımı yeteneklerini geliştirmek için kullanıldı. Model, metinden görüntüye ve metinden videoya eğitimin bir kombinasyonu ile video klipler oluşturmaya yönlendirildi. Temporal Autoencoder (TAE) gibi araçlar kullanılarak video verileri sıkıştırıldı ve uzamsal örnekleyici teknikleri ile çözünürlük artırıldı.
Movie Gen’in Yetenekleri
- Video ve Ses Üretimi: 16 saniyeye kadar uzunlukta videolar ve senkronize sesler üretebilir.
- Kişiselleştirilmiş Video Üretimi: Belirli kişilerin görüntü ve metin istemlerine dayalı videolar oluşturur.
- Hassas Video Düzenleme: Metin istemleri ile video kliplerde detaylı düzenlemeler yapar.
Movie Gen’in Kıyaslama Araçları
Meta, Movie Gen’in performansını test etmek için Movie Gen Bench adlı bir kıyaslama araçları paketi sunar. Bu paket, video ve ses üretim yeteneklerini çeşitli kategorilerde test eder.
Pratik Uygulamalar
Movie Gen, film yapımında yaratıcı süreçleri desteklemek için kullanılabilir. Film yapımcıları, bu modeli kullanarak metin tabanlı yönlendirmelerden yüksek kaliteli görseller ve sesler üreterek hikaye anlatımında yeni yollar keşfedebilirler.
Meta’nın Movie Gen teknolojisi, yapay zeka odaklı içerik oluşturma için yeni standartlar belirleyerek video ve ses üretiminde dönüştürücü bir rol oynar.
Daha fazla bu tarz içerikler için web sitemizi ve de instagram hesabımızı takip etmeyi unutmayınız!
