Yandex ekibi, beş saniyelik videolar oluşturmak için YandexART (Vi) sinir ağının beta sürümünü sundu. Basın servisinin söylediği gibi model, koşan bir köpek, ağaçtan düşen bir yaprak veya havai fişek patlaması gibi çerçevedeki nesnelerin yumuşak hareketlerini yeniden yaratmayı öğrendi.
Sinir ağı, hem sıradan kullanıcılar tarafından, örneğin telefonları için benzersiz bir animasyonlu ekran koruyucu oluşturmak için hem de blogcular, animatörler ve diğer uzmanlar tarafından kullanılabilir. YandexART (Vi) Masterpiece uygulamasında zaten mevcuttur.
Şirket, geçen yılın ağustos ayında metin açıklamalarından video oluşturmaya yönelik modelin önceki bir versiyonunu tanıtmıştı. Önceki çözüm, kamera hareket ediyormuş gibi görünen ancak nesnenin hareket etmediği animasyonlar elde etmemize olanak tanıyordu. Ayrıca nesneler, üretim sırasında çerçeveden çerçeveye önemli ölçüde değişti. YandexART (Vi), gerçekçi hareketleri yeniden oluşturmanın yanı sıra kareler arasındaki ilişkiyi de dikkate almayı öğrendi – bu sayede videolar daha kesintisiz ve pürüzsüz. Sinir ağının bu görevle başa çıkabilmesi için, örneğin hareket eden bir araba veya sinsi bir kedi gibi hareketli nesnelerin yer aldığı videolar üzerinde eğitildi.
Sinir ağı, fark edilmeden birbirinin yerini alan ve düzgün bir video oluşturan bir dizi kare oluşturur. Model, girdi olarak kullanıcıdan çerçevede ne olması gerektiğine ilişkin bir metin açıklaması alır (örneğin: “Bir gergedan karanlık bir ormanda hip-hop dansı yapar”) ve animasyonun başlayacağı bir resim oluşturur. Model daha sonra dijital gürültüyü yavaş yavaş bu görüntü ve metin sorgusuna dayalı bir kare dizisine dönüştürüyor.