Meta, Metin İstemlerinden 3B Varlıklar Oluşturmak İçin Üretken Bir Yapay Zeka Sistemi Olan Meta 3D Gen Üzerine Çalışmayı Paylaşıyor

Meta, 3B varlıklar üretebilen üretken bir yapay zeka (AI) modeli hakkında yeni bir araştırma makalesi paylaştı. Meta 3D Gen olarak adlandırılan AI modeli, bir dakikadan kısa sürede metin istemlerinden yüksek kaliteli 3B modeller üretiyor. Şirket, AI modelinin tamamen şirket içinde geliştirilen doku oluşturma ve metinden ağa tekniklerinin bir kombinasyonunu kullanarak uçtan uca yüksek çözünürlüklü dokular ve malzeme haritaları oluşturabileceğini vurguladı. Bu yaklaşımın, görüntüden 3B modellere geçiş yapan Tencent ve Stability AI’nın yaklaşımlarından farklı olduğu dikkat çekici.

Araştırmasını paylaşıyor kağıtŞu anda Meta’nın web sitesinde barındırılan , şirket 3D Gen modelinin 3D modelleri yüksek hızlı doğrulukla ve yüksek kaliteyi garanti ederek işleyebildiğini iddia etti. Modelin ayrıca, oluşturulan modellerin farklı gerçek dünya uygulamalarında yeniden aydınlatılmasına olanak tanıyan fiziksel tabanlı işlemeyi (PBR) desteklediği söyleniyor. Araştırma makalesinin akran doğrulaması yapılmamış olması dikkat çekicidir, bu nedenle yapılan iddiaların bazıları abartılmış olabilir. Model halka açıklanmadığı sürece bunu öğrenmenin bir yolu yoktur.

Makale ayrıca AI modelini geliştirmek için kullanılan yaklaşımları da açıklıyor. Meta, iki şirket içi sistem geliştirdi — Meta 3D AssetGen ve Meta 3D TextureGen. AssetGen, verilen bir metin isteminden 3B nesneler oluşturmaktan sorumludur. Aşama I’de, istemi anlama becerisini kullanarak 3B modeli işler ve Aşama II’de, görünüm tabanlı dokuları uzlaştırmak ve hiçbir görünümde görünmeyen kısımları tamamlamak için 3B modeli daha da geliştirir. TextureGen, modelde doğru dokuları bulup uygulamaktan sorumludur.

Bu 3B model oluşturma yönteminin, oluşturulan 3B varlıklar için çeşitli avantajları vardır. Örneğin, metin istemleri kullandığı için referans görsellere gerek yoktur ve kullanıcılar tamamen benzersiz modeller oluşturabilir. PBR desteği ayrıca bu modellerin sistemden çıkarılıp doğrudan diğer ortamlara uygulanabileceği anlamına gelir. Makale, bu modellerin oluşturma çıktısının da gerçekçi olduğunu iddia ediyor.

Meta, 3D Gen AI modelinin tek aşamada %68 kazanma oranına sahip olduğunu, bunun da 100 vakadan 68’inde AI’nın metin istemine göre doğru 3D varlığı üretebileceği anlamına geldiğini söyledi. Şirket ayrıca modelin karmaşık istemler için istem sadakati ve görsel kalite açısından çeşitli endüstri temel çizgilerini geride bıraktığını iddia ediyor.