Pengenalan asisten bedah robotik (RSA) di ruang operasi telah meningkatkan presisi dan efisiensi pembedahan. Para ahli bedah kini mengoperasikan robot-robot ini dari jarak jauh, sehingga meningkatkan ketangkasan mereka dan berpotensi menyederhanakan alur kerja bedah. Pengenalan dua kerangka template baru, SuFIA dan SuFIA-BC, bertujuan untuk lebih meningkatkan kemampuan RSA. SuFIA menggunakan panduan bahasa alami dan model bahasa skala besar untuk perencanaan tingkat tinggi, dan SuFIA-BC menggunakan teknik kloning perilaku untuk meningkatkan ketangkasan dan akurasi RSA.

Penelitian di balik SuFIA dan SuFIA-BC didorong oleh tujuan untuk mengurangi kelelahan ahli bedah, meningkatkan keselamatan pasien, dan menjadikan perawatan berkualitas tinggi lebih mudah diakses. Kerangka kerja ini telah diuji di berbagai subtugas bedah baik dalam lingkungan simulasi maupun fisik. Pengenalan aset fotorealistik diharapkan dapat menurunkan hambatan untuk masuk ke dalam penelitian robotika bedah, yang secara tradisional terhambat oleh terbatasnya akses data dan tingginya biaya yang terkait dengan demonstrasi ahli dan perangkat keras.

Penyempurnaan kerangka ORBIT-Bedah menciptakan lingkungan pelatihan fotorealistik untuk robot bedah. Didukung oleh NVIDIA Omniverse, lingkungan ini menampilkan model yang akurat secara anatomi dan rendering dengan ketelitian tinggi. Simulator kembar digital yang dibuat dari kerangka kerja ini sangat penting untuk melatih dan mengevaluasi model klon perilaku dalam tugas bedah yang kompleks. Studi ini menyelidiki modalitas observasi visual yang berbeda dan mengevaluasi efektivitas model yang berbeda dalam subtugas bedah dasar.

Hasil penelitian menunjukkan bahwa kinerja model kloning perilaku bervariasi tergantung pada kompleksitas tugas dan jenis observasi visual yang digunakan. Model berbasis point cloud lebih baik untuk tugas spasial, sedangkan model berbasis RGB efektif jika isyarat warna penting. Studi ini juga menyoroti pentingnya efisiensi sampel dalam pelatihan model dan ketahanan model point cloud terhadap perubahan perspektif kamera. Wawasan ini penting untuk penerapan praktis RSA dalam pengaturan bedah dan menyoroti manfaat potensial dari kerangka baru ini.