NVIDIA telah bermitra dengan American Association for Deaf Children dan Hello Monday untuk meluncurkan Signs, sebuah platform web interaktif yang dirancang untuk meningkatkan pembelajaran Bahasa Isyarat Amerika (ASL). Platform ini menampilkan avatar 3D yang memperagakan tanda-tanda ASL dan alat AI yang memberikan umpan balik waktu nyata kepada pengguna tentang tanda-tanda mereka melalui analisis webcam. Upaya ini bertujuan untuk mengatasi kurangnya alat AI untuk ASL, meskipun bahasa ini merupakan bahasa ketiga yang paling umum digunakan di Amerika Serikat.

Kolaborasi ini juga berfokus pada pembuatan kumpulan data video sumber terbuka untuk ASL, yang akan diverifikasi oleh pengguna dan penerjemah ASL profesional. Sasaran NVIDIA adalah untuk mengkompilasi 400.000 klip video yang secara akurat mewakili 1.000 kata isyarat. Kumpulan data ini akan berfungsi sebagai kamus visual dan sumber daya pendidikan yang komprehensif, yang mendukung komunitas tuna rungu dan mereka yang tertarik untuk mempelajari ASL.

Cheri Dowling, direktur eksekutif American Association for Deaf Children, menekankan pentingnya alat-alat ASL yang dapat diakses oleh keluarga dengan anak-anak yang mengalami gangguan pendengaran. Platform Signs tidak hanya sebagai alat bantu belajar tetapi juga sebagai pendorong kepercayaan diri, karena semua kosakata telah diverifikasi oleh para pendidik ASL. NVIDIA berencana untuk menggunakan kumpulan data tersebut untuk mengembangkan aplikasi AI yang memfasilitasi komunikasi antara orang tuli dan orang yang bisa mendengar. Data tersebut akan dipublikasikan untuk menciptakan teknologi yang dapat diakses.

Saat ini Signs mengundang individu dari semua tingkat keterampilan untuk merekam diri mereka sendiri dalam menandatangani dan berkontribusi pada kumpulan data ASL. Platform tersebut telah memiliki 100 tanda untuk pembelajaran dan praktik, dan berencana untuk memperluas dan menggabungkan nuansa ASL tambahan, seperti ekspresi wajah dan variasi regional. Tim Signs bekerja sama dengan para peneliti untuk meningkatkan pengalaman pengguna bagi orang tuli dan orang yang sulit mendengar, dan kumpulan data tersebut diharapkan akan dirilis akhir tahun ini. Pihak yang berminat dapat mulai belajar atau berkontribusi pada proyek tersebut di signs-ai.com.