Ahli bedah akan segera memiliki asisten baru di ruang operasi, karena para peneliti telah meningkatkan robot bedah yang banyak digunakan sehingga dapat secara mandiri melakukan tugas-tugas tertentu dengan presisi yang sama seperti tangan manusia. Sebuah tim dari Universitas Johns Hopkins dan Universitas Stanford telah berhasil mengintegrasikan model bahasa visual yang dilatih pada video bedah ke dalam sistem robot da Vinci untuk melakukan tugas-tugas seperti pengangkatan jaringan, penanganan jarum bedah, dan penjahitan tanpa pemrograman terperinci bekerja.

Pendekatan inovatif terhadap pelatihan robot yang dikenal sebagai pembelajaran imitatif memungkinkan robot da Vinci melakukan prosedur pembedahan dengan meniru gerakan yang diamati dalam rekaman video seorang dokter. Cara ini berbeda dengan teknik pemrograman tradisional yang mengkodekan setiap gerakan robot. Para peneliti menggunakan GPU NVIDIA GeForce RTX 4090, PyTorch, dan perpustakaan NVIDIA CUDA-X AI untuk melatih model tersebut, yang mereka presentasikan pada Robot Learning Conference di Munich.

Untuk penelitian ini, tim peneliti melengkapi tiga robot da Vinci dengan kamera video kecil dan menghabiskan sekitar 20 jam untuk memfilmkan robot yang mengoperasikan gripper mereka pada bantalan silikon yang digunakan untuk praktik bedah. Robot yang belum pernah menyentuh jaringan hewan tersebut kemudian ditugaskan untuk mengoperasi ayam dan babi, dan berhasil menyelesaikan operasi tersebut dalam lingkungan zero-shot. Robot tersebut juga menunjukkan kemampuan untuk mengatasi tantangan tak terduga secara mandiri, seperti mengambil jarum yang terjatuh.

Hasil yang menjanjikan ini menunjukkan masa depan di mana robot otonom dapat menangani seluruh operasi, dan para peneliti terus berupaya meningkatkan model dan memperluas kemampuan robot da Vinci. Temuan mereka dan penelitian yang sedang berlangsung dirangkum dalam makalah yang diterbitkan di GitHub, dan informasi lebih lanjut tentang robot bedah otonom tersedia melalui laporan tambahan.