Meta bir aracılığıyla duyuruyor Blog yazısı “yalnızca metin talimatlarına dayalı kontrollü görüntü düzenleme ve yayılma modellerine dayalı metinden videoya dönüştürme yöntemi” üzerine yeni araştırmalar üzerinde çalışmakla meşgul olduklarını söylüyorlar.
Bu, daha basit bir deyişle, Facebook ve Instagram’a üretken yapay zeka araçlarını eklemek istedikleri anlamına geliyor. Meta’nın geliştirmekte olduğu projelerin isimleri Emu Video ve Emu Edit’tir.
Emu Video Nedir?
Bu araç, adından da anlaşılacağı gibi video oluşturmak içindir. Meta bunu “yayılma modellerine dayalı metinden videoya dönüştürme için basit bir yöntem” olarak tanımlıyor. Emu Video çeşitli girdilere yanıt vermelidir: yalnızca metin, yalnızca resim ve hem metin hem de resim. Meta, sürecin iki adıma ayrıldığını açıklıyor: İlk olarak, bir metin istemine göre koşullandırılmış görüntüler oluşturmak ve ardından hem metin hem de oluşturulan görüntüye göre koşullandırılmış video oluşturmak.
En son teknolojiye sahip yaklaşımımızın uygulanması basittir ve saniyede 16 kare hızında 512×512 dört saniye uzunluğunda videolar oluşturmak için yalnızca iki yayılma modeli kullanır.
Emu Edit nedir?
Bu, tanıma ve oluşturma görevleri aracılığıyla “hassas görüntü düzenlemeye” izin vermelidir. Meta’nın dediği gibi üretken yapay zekanın kullanımı genellikle tek bir görev değil, bir süreçtir.
“Emu Edit, yerel ve genel düzenleme, arka planı kaldırma ve ekleme, renk ve geometri dönüşümleri, algılama ve segmentasyon ve daha fazlası gibi görevleri kapsayan talimatlar aracılığıyla serbest biçimli düzenleme yeteneğine sahip. Mevcut yöntemler genellikle çeşitli düzenleme görevlerinde ya aşırı değişiklik yapmaya ya da düşük performans göstermeye eğilimlidir. Biz asıl amacın sadece ‘inandırıcı’ bir imaj yaratmak olmaması gerektiğini savunuyoruz. Bunun yerine model, yalnızca düzenleme isteğiyle ilgili pikselleri tam olarak değiştirmeye odaklanmalıdır. Günümüzün birçok üretken yapay zeka modelinin aksine Emu Edit, talimatları tam olarak takip ederek giriş görüntüsündeki talimatlarla ilgisi olmayan piksellerin dokunulmadan kalmasını sağlar. Örneğin, ‘Aloha!’ metnini eklerken Meta ekibi, beyzbol şapkası kadar şapkanın da değişmeden kalması gerektiğini söylüyor.
Potansiyel kullanım durumları
Meta için önümüzdeki yol kesinlikle yapay zeka odaklı.
“Bu çalışma şu anda tamamen temel bir araştırma olmasına rağmen, potansiyel kullanım durumları açıkça ortadadır. Yanıtınız için mükemmel medyayı aramak yerine, grup sohbetine göndermek üzere kendi animasyonlu çıkartmalarınızı veya akıllı GIF’lerinizi anında oluşturduğunuzu hayal edin. Veya kendi fotoğraflarınızı ve görsellerinizi düzenleyebilirsiniz; hiçbir teknik beceri gerektirmez. Veya statik fotoğrafları canlandırarak Instagram gönderilerinize ekstra çekicilik katın. Veya tamamen yeni bir şey üretmek”, diye bitiriyor blog yazısı.