Meta, sesle fotogerçekçi filmler oluşturan yapay zeka modellerini tanıttı

Meta, 4 Ekim’de “Movie Gen” adı verilen, ses efektleri ve arka plan müzikleriyle birlikte 16 saniyeye kadar uzunlukta fotogerçekçi filmler üretebilen bir dizi yapay zeka modelini tanıttı.

Movie Gen, basit metin istemlerinden video ve ses üretebilen ilk çok modlu AI modeli değil, ancak son teknoloji yeteneklerini sergiliyor gibi görünüyor. Uygulamanın geliştirilmesinden sorumlu araştırmacılar, insan testlerinde rakip sistemlerden daha iyi performans gösterdiğini  iddia ediyor .

Film Gen

Meta’dan bir blog yazısına göre, Movie Gen şu anda saniyede 16 kare (FPS) kare hızında 16 saniyeye kadar uzunlukta filmler üretebiliyor. Bunu perspektife koymak gerekirse, dijital çağdan önceki Hollywood filmleri geleneksel olarak “film görünümü” adı verilen şeyi elde etmek için 24 FPS’de çekiliyordu.

Oyun ve diğer grafik uygulamalarında daha yüksek FPS oranları daha iyi kabul edilirken, Meta’nın 16 FPS’si profesyonel kalitedeki film görüntülerinden çok da uzak değil.

Movie Gen modelleri, basit metin komutlarına dayalı olarak tamamen yeni filmler üretebilir veya nesneleri ve arka planları değiştirmek veya düzenlemek için mevcut görüntüleri veya videoları düzenleyebilir.

Ancak en gelişmiş katkısı, AI paketinin ses efektleri ve arka plan müziği içeren 45 saniyeye kadar ses üretme yeteneği olabilir . Meta’ya göre Movie Gen, sesi oluşturulan videolardaki hareketle bütünleştirir ve senkronize eder.

Sadece araştırma

Meta, Movie Gen’in arkasındaki temel modelleri şimdilik gizli tutuyor. Şirket, ürünün lansmanı için bir zaman çerçevesi vermedi ve dağıtımdan önce daha fazla güvenlik testi gerektireceğini söyledi.

Meta’nın AI ekibinin bir araştırma makalesine göre:

“Movie Gen temel model kadrosu araştırma amaçlı geliştirildi ve dağıtılmadan önce çok sayıda iyileştirmeye ihtiyaç duyuyor… Bu modelleri dağıttığımızda, kötüye kullanımı önlemek için politikalarımızı ihlal eden girdi istemlerini veya üretimleri reddedebilen güvenlik modellerini dahil edeceğiz.”