Nvidia’nın sahip olduğu içeren bir şenlikli video yayınladı CEO Jensen Huang’ın Jingle Bells şarkısını söyleyen şirin bir sallanan kafa avatarı. Geleneksel Noel şarkısı, ‘Toy Jensen’ bol dökümlü deri ceketten havalı parmak şıklatma hareketiyle 50’lerin şarkıcı stilini canlandırdı. Bu eğlenceli video harika teknolojileri sergiliyor ve biraz tatil neşesi saçıyor.
Videonun yayınlanması sadece Nvidia hayranlarına iyi bayramlar demenin bir yolu değil, aynı zamanda gösterir (yeni sekmede açılır) Nvidia Omniverse Avatar Cloud Engine veya ACE platformunun yetenekleri. Performansın gerçekçi yüz ifadeleri ve vücut hareketlerinin yanı sıra Jensen’in tonunu profesyonel bir şarkıcının performansıyla eşleştiren ses dönüştürme teknolojisinin işlenmesi ve gösterilmesi “sadece saatler” sürdü – bu, Jensen’in şarkı söyleyen sesinin gerçek bir kaydı değil.
Video öğelerini parçalayan Nvidia geliştirme ekibi, Jensen Huang’ın ses tonunu profesyonel bir vokalistin Jingle Bells şarkı örneğine eşlemek için yakın zamanda geliştirilmiş bir model kullandı. Avatarın doğru notaları ve ritmi söylemesi için profesyonel şarkı söylemenin notaları Toy Jensen’in dijital sesine uygulandı. Bu performansın müzik düzenlemesinin yapay zeka tarafından oluşturulmadığı, ancak Michael Bublé ve David Foster ile çalışmış bir besteci ve yapımcı olan Jochem van der Saag tarafından bir araya getirildiği dikkat çekicidir.
Sonraki, Omniverse Audio2Face (yeni sekmede açılır) ve Audio2Gesture (yeni sekmede açılır) Toy Jensen avatarının animasyonlu müzik performansına uygun gerçekçi yüz ifadeleri ve jestler oluşturmak için teknolojilerden yararlanıldı. Daha eksiksiz bir X-Factor yetenek gösterisi tarzı performans için, Nvidia’nın bazı yeni Audio2Walk-down-steps teknolojisi geliştirmesi gerekeceğini düşünüyoruz.
Yukarıdaki videoyu bir perspektife oturtan Jensen Huang, Kasım ayında Taipei’yi ziyaret ederken manşetlere çıktı ve şarkı söyleyen bir ikiliyi bombaladı. Tayvan’daki bir Esports karnaval etkinliği sırasında, Lady Gaga’nın “Bizi Her Zaman Bu Şekilde Hatırla” performansı sırasında Lah Yileh Lee ve Xinting Lee arasında sıkışmayı başardı. Performans viral oldu, ancak Huang, Jingle Bells’in gerçek kişi yorumunu kaydetmek için çok utangaç olduğu konusunda ısrar ediyor, bu nedenle mühendislerini, üstü gömülü Toy Jensen performansını hazırlamakla görevlendirdi.
Nvidia, Omniverse ACE platformunun yakında erken erişim ortakları için hazır olacağını söylüyor. Sürümün oynamak için bir Toy Jensen içerip içermediğini söylemiyor.
