NVIDIA telah membuka sumber teknologi Audio2Face-nya, yang bertujuan untuk mempercepat pengembangan avatar berbasis AI dalam gim dan aplikasi 3D. Audio2Face menggunakan AI untuk menghasilkan animasi wajah yang realistis dari input audio, menganalisis karakteristik akustik, dan menciptakan data animasi yang dapat dirender secara offline atau streaming secara real-time. Teknologi ini diharapkan dapat memungkinkan sinkronisasi bibir dan ekspresi emosi yang akurat untuk karakter digital.

NVIDIA telah menyediakan model dan perangkat pengembangan perangkat lunak (SDK) Audio2Face untuk semua pengembang, yang memungkinkan mereka membuat dan menerapkan karakter fidelitas tinggi dengan animasi canggih. Selain itu, NVIDIA telah merilis kerangka kerja pelatihan Audio2Face, yang memungkinkan pengembang untuk menyesuaikan dan menyempurnakan model yang ada untuk kasus penggunaan tertentu. Alat sumber terbuka dan informasi selengkapnya tersedia di situs web pengembang NVIDIA.

Model Audio2Face banyak digunakan di berbagai industri, dengan perusahaan seperti Convai, Codemasters, dan GSC Games World yang mengintegrasikannya ke dalam aplikasi mereka. Reallusion telah mengintegrasikan Audio2Face ke dalam rangkaian alatnya untuk meningkatkan efisiensi produksi animasi karakter berkualitas tinggi. Survios dan The Farm 51 juga telah merasakan manfaat dari teknologi ini, dengan The Farm 51 menyatakan bahwa Audio2Face telah mengurangi waktu produksi animasi secara signifikan dan menghadirkan tingkat realisme baru pada karakter game.

Komitmen NVIDIA untuk mendukung komunitas pengembang terbukti dari keputusannya untuk membuka Audio2Face sebagai sumber terbuka, yang mendorong inovasi dan kolaborasi, memungkinkan pengembang, mahasiswa, dan peneliti untuk berkontribusi pada kemajuan teknologi animasi wajah. Komunitas pengembang NVIDIA Audio2Face di Discord berfungsi sebagai platform untuk berbagi dan mendiskusikan perkembangan terbaru di bidang ini.