Google, yapay zeka temelli "gerçekçi video üretimi için mekansal-zamansal yayılma modeli" olan Lumiere'yi tanıttı. Peki bu program neyin nesi? AI video üreteci, metin açıklamalarından dinamik görüntüler oluşturabilen şu ana kadar ki en güçlü üreteç olarak kabul ediliyor. Lumiere, mevcut modellerden farklı olarak, videoları tek bir geçişte, baştan sona üretebilen benzersiz bir mimariye sahip. Diğer modeller, birkaç anahtar kare üretip, ardından zaman içinde interpolasyon yaparak çalışırken, bu yöntem üretilen videonun tutarlılığını zorlaştırabilir. Lumiere, metni videoya dönüştürme, statik görüntüleri dinamik hale getirme, örnek temelinde belirli bir tarzda video oluşturma, yazılı ipuçlarına göre mevcut videoyu düzenleme, statik bir görüntünün belirli alanlarını animasyonla canlandırma veya videoyu parçalı olarak düzenleme gibi çeşitli modlarda çalışır.
GOOGLE DAHA GERÇEKÇİ VİDEOLAR İÇİN HAZIR
Google yetkilileri şöyle açıklama yaptı: "Modelimizi, metin açıklamaları içeren 30 milyon video veri setinde T2V [metinden videoya dönüşüm] eğitimi yapıyoruz. Videolar, saniyede 16 kare ile 80 kare uzunluğunda. Temel model, 128 × 128 piksel çözünürlükte eğitilmiştir" diye açıklıyor. Sonuç olarak, 1024 × 1024 piksel çözünürlüğünde 5 saniyelik videolar elde ediliyor.Google Lumiere, elbette ilk AI video üreteci değil. Google daha önce Imagen Video modelini tanıtmıştı, bu model saniyede 24 kare ile 1280 × 768 çözünürlüğünde videolar üretiyordu, ancak bu modelin yaratımları çok daha mütevazıydı. Meta✴ Make-A-Video, Runway Gen2 ve Stable Video Diffusion gibi projelerin sonuçları da daha az gerçekçiydi. Google, bu tür projelerin oluşturabileceği tehlikelerin farkında: "Bu çalışmadaki ana amacımız, başlangıç seviyesindeki kullanıcılara esnek ve yaratıcı bir şekilde görsel içerik üretme imkanı sağlamaktır. Ancak, teknolojimizi kullanarak sahte veya zararlı içeriklerin üretilmesi riski de var ve bu tür önyargı ve kötüye kullanım vakalarını tespit etmek için araçlar geliştirmenin ve uygulamanın son derece önemli olduğuna inanıyoruz." diyor...
