Sebuah pendekatan baru untuk menciptakan representasi digital dinamis dari dunia nyata sedang dikembangkan, dengan penekanan pada sinkronisasi waktu nyata dengan lingkungan nyata. Teknik ini bertujuan untuk meningkatkan kemampuan robot dengan menyediakan simulasi internal langsung yang mencerminkan kondisi dunia nyata dan membantu mereka dalam berbagai tugas.

Disebut "Gaussian yang diwujudkan secara fisik", konsep ini memanfaatkan terobosan dalam rendering yang dapat dibedakan dan pemahaman pemandangan untuk membangun simulator dari sejumlah kecil gambar dan pengetahuan fisika dasar. Inovasi ini memungkinkan pembaruan dan koreksi model yang berkelanjutan, memastikan akurasi yang mencerminkan realitas.

Sistem ini mempertahankan model lingkungan yang akurat secara visual dan fisik dengan menggunakan representasi ganda partikel dan Gaussian. Partikel yang dikendalikan oleh mesin fisika menentukan strukturnya, sementara Gaussian 3D merender tampilan visualnya. Sistem loop tertutup ini memungkinkan kembaran digital tetap adaptif dan efisien sekaligus mengurangi jumlah kamera yang dibutuhkan berdasarkan pengetahuan robotika sebelumnya yang luas.

Simulator ini menggunakan NVIDIA Warp untuk perangkat fisika dan visual, dan gsplat untuk rendering yang dapat dibedakan. Jika Anda tertarik mempelajari lebih lanjut tentang aspek teknis, demo, dan akses ke kode sumber terbuka, temukan informasi lebih lanjut secara daring.