NVIDIA hari ini mengumumkan serangkaian alat untuk mengatasi kebutuhan akan data sintetis berkualitas tinggi dalam robotika dan meningkatkan pengembangan sistem AI fisik. Kerangka kerja simulasi robotika sumber terbuka perusahaan, termasuk Isaac Sim, memungkinkan pengembang untuk membuat lingkungan simulasi berbasis fisika. Lingkungan ini sangat penting untuk melatih kebijakan dan model robot dengan cara yang hemat biaya, alih-alih mengumpulkan sejumlah besar data dunia nyata.

NVIDIA mengembangkan OSMO, sebuah orchestrator berbasis cloud, untuk mengelola alur kerja kompleks yang terlibat dalam pengembangan AI fisik. OSMO bertindak sebagai pusat komando terpusat, memungkinkan pengembang untuk mendefinisikan, menjalankan, dan memantau pipeline AI multi-tahap di berbagai lingkungan komputasi. Alat ini menyederhanakan proses penskalaan alur kerja AI, memungkinkan pengembang untuk menangani berbagai tugas secara efisien.

Proses pembuatan lingkungan simulasi dapat dilakukan secara lokal atau di cloud menggunakan opsi seperti Azure Isaac Sim Development Workstation. Teknologi Omniverse NuRec dari NVIDIA memainkan peran kunci dalam merekonstruksi kembaran digital 3D dari data sensor dunia nyata, yang kemudian digunakan untuk menghasilkan data sintetis dan melatih model AI. Selain itu, penyertaan SimReady Assets, model 3D presisi tinggi berbasis OpenUSD, menyederhanakan pengaturan simulasi robot.

Alur kerja MobilityGen NVIDIA untuk OSMO mendukung metode pengumpulan data manual dan otomatis, memfasilitasi pembuatan data untuk robot bergerak. Data ini selanjutnya diperkaya oleh model NVIDIA Cosmos World Foundation, menambahkan keragaman visual pada data sintetis untuk meningkatkan kinerja saat menerapkan kebijakan AI. Alat dan alur kerja NVIDIA dirancang agar dapat diskalakan, memungkinkan pembuatan kumpulan data besar yang diperlukan untuk melatih model robot canggih.