Avatar Cloud Engine AI Jadi Pembuka NVIDIA Di Computex 2023

Keynote NVIDIA di Computex 2023 langsung dibuka oleh CEO Jensen Huang. Dan AI akan menjadi focus utama perusahaan kali ini. Salah satunya adalah ACE for Games yang memungkinkan audio-to-facial-expression, text-to-speech, dan percakapan bahasa alami.

Baca juga : TEAMGROUP Siapkan Produk Terbaik Di COMPUTEX 2023

Nah, kehadiran Nvidia Avatar Cloud Engine (ACE) yang nantinya merupakan layanan AI khusus dan diklaim akan membawa kecerdasan ke karakter yang tidak dapat dimainkan melalui interaksi bahasa alami bertenaga AI.

Untuk segmen gaming, hadirnya ACE akan memungkinkan NPC bisa mendengarkan percakapan pemain dan bisa menghasilkan respons lebih banyak dan tidak ada kalimat yang terus diulang. Sistem juga dapat menganimasikan wajah karakter sehingga sesuai dengan kata yang dihasilkan yang mereka ucapkan.

Huang mendemonstrasikan teknologi tersebut dalam aksi melalui demo bertenaga Unreal Engine 5 real-time, yang dirancang oleh Convai, yang disebut Kairos. Klip yang sangat mirip Cyberpunk 2077 menunjukkan seorang pemain berjalan ke toko ramen dan berbicara dengan NPC Jin. Pemain terdengar mengajukan pertanyaan dengan suaranya dan menerima jawaban yang sesuai dengan konteks cerita dan karakter.

Meskipun masih terkesan kaku dari sisi dialog, namun ACE for Games cukup mengesankan dan tentu saja jika disempurnakan jauh lebih baik pasti akan membawa hal yang lebih menarik buat gamer.

Btwm ACE for Games dibangun di atas Nvidia Omniverse dan menawarkan akses ke tiga komponen. Pertama adalah Nvidia NeMo, yang digunakan untuk membangun, menyesuaikan, dan menggunakan model bahasa. Ini memiliki fitur yang disebut Pagar Pembatas NeMo yang dapat melindungi dari pengguna yang melakukan percakapan “tidak aman”, sesuatu yang mungkin diperlukan saat diterapkan ke video game.

Komponen lainnya adalah Nvidia Riva, digunakan untuk pengenalan ucapan otomatis dan text-to-speech sehingga pemain dapat melakukan percakapan langsung melalui mikrofon.

Elemen terakhir adalah Nvidia Omniverse Audio2Face. Komponen inilah yang memungkinkan animasi wajah karakter cocok dengan kata-kata yang mereka ucapkan. Teknologi ini sudah digunakan di game mendatang STALKER 2: Heart of Chernobyl dan Fort Solis.

“Jaringan saraf yang mengaktifkan Nvidia ACE for Games dioptimalkan untuk kemampuan yang berbeda, dengan berbagai pertukaran ukuran, kinerja, dan kualitas. Layanan pengecoran ACE for Games akan membantu pengembang menyempurnakan model untuk game mereka, kemudian menerapkannya melalui Nvidia DGX Cloud , PC GeForce RTX atau lokal untuk inferensi real-time,” kata Nvidia. “Model ini dioptimalkan untuk latensi – persyaratan penting untuk interaksi yang imersif dan responsif dalam game.”

Comments