ChatGPT’den Google Bard’a veya telefonunuzda çalışabilen yerel bir sohbet robotu olan MLC LLM’ye kadar geniş bir dil modeliyle metin sohbeti yapmanın pek çok yolu vardır. Yapay zeka için bir sonraki sınır, hazır etkileşimler yerine geniş açık bir konuşma yapabileceğiniz oyunlarda LLM’lerin gücünü NPC’lere (oyuncu olmayan karakterler) getirmektir.
Computex 2023 açılış konuşması sırasında Nvidia CEO’su Jensen Huang, oyun karakterlerini doğal dilde konuşma, sesli-yüz ifadeli ve metinden konuşmaya / konuşmadan-konuşmaya kullanarak hayata geçirmek için tasarlanmış bir AI model döküm hizmeti olan ACE for Games’i tanıttı. -metin yetenekleri. Huang, bir ramen erişte dükkanı işleten Jin adlı bir NPC’nin sesle sorular soran ve NPC’nin geçmişiyle eşleşen gerçek sesli yanıtlar alan bir insan oyuncuyla etkileşime girdiği bir oyun demosu gösterdi.
Demoda, oyuncu (Kai), Jin’in Ramen dükkanına girer, ona (sesle) nasıl olduğunu sorar ve bölgenin yüksek suç oranına sahip olduğu hakkında bir konuşma yapar. Kai yardım edip edemeyeceğini sorar ve Jin, “Bu konuda bir şeyler yapmak istiyorsanız, güçlü suç lordu Kumon Aoki’nin şehirde her türlü kaosa neden olduğuna dair söylentiler duydum. Bu şiddetin kaynağı o olabilir” şeklinde yanıt verir. .” Kai, Aoki’yi nerede bulacağını sorar ve Jin ona söyleyerek kullanıcıyı görevine başlatır.
Huang, “Yapay zeka yalnızca ortamın kızarmasına ve sentezine katkıda bulunmakla kalmayacak, aynı zamanda karakterleri canlandıracak” dedi. “AI, video oyunlarının geleceğinin çok büyük bir parçası olacak.”
Nvidia ACE for Games, zaten var olan üç farklı bileşene yüksek hızlı erişim sunacak. Birincisi, Nvidia NeMo, LLM’leri eğitmek ve dağıtmak için bir AI çerçevesidir ve uygunsuz / “güvenli olmayan” AI konuşmalarını önlemek için tasarlanmış NeMo Guardrails’i içerir. Muhtemelen bu, NPC’lerin kullanıcılardan gelen uygunsuz, konu dışı istemleri yanıtlamasını engelleyecektir. Korkuluklar ayrıca, kullanıcıların veya olası enjektörlerin “jailbreak” botlar ve onlara kötü şeyler yaptırmak.
Nvidia Riva, şirketin konuşmayı metne / metinden konuşmaya çözümüdür. Oyunlar için ACE iş akışında, bir oyuncu mikrofonu aracılığıyla bir soru soracak ve Riva bunu LLM’ye beslenen metne dönüştürecektir. LLM daha sonra, Riva’nın tekrar kullanıcının duyacağı konuşmaya dönüştürdüğü bir metin yanıtı üretecektir. Elbette oyunların yanıtları metin olarak da göstermesini bekleriz. Nvidia Riva’nın konuşmadan metne ve metinden konuşmaya özelliklerini kendiniz deneyebilirsiniz. şirketin sitesi.
Nvidia Omniverse Audio2Face, karakterlerin söyledikleriyle eşleşen yüz ifadelerine sahip olmalarına izin verdiği için oyunlar için ACE iş akışındaki son adımı sağlar. Şirket şu anda bu ürünü beta olarak sunuyor ve şunları yapabilirsiniz: burada dene.
Kairos olarak adlandırılan demo, tarafından tasarlandı. Convaibir parçası olan oyun içi yapay zeka girişimi Nvidia’nın Başlangıç programı gelecek vaat eden şirketleri risk sermayesi ile birleştiren. Şirketin sitesinde, oyun geliştiricilerin karmaşık arka plan hikayeleri ile gerçeğe yakın NPC’ler oluşturmasına olanak tanıyan bir araç seti sunuyor.