MONAI meningkatkan kerangka pemrosesan gambar medis sumber terbuka dengan menggabungkan model AI multimodal yang menganalisis data campuran teks, gambar, dan video. Integrasi ini bertujuan untuk meningkatkan diagnosis penyakit dini dan efisiensi layanan kesehatan dengan memberikan gambaran data pasien yang lebih komprehensif. Dengan lebih dari 4,5 juta unduhan dan ditampilkan di lebih dari 3.000 makalah penelitian, MONAI adalah platform terkemuka di bidang AI medis dan saat ini berkembang untuk mencakup beragam data medis seperti EHR dan dokumen klinis.

Pengembangan terbaru platform ini, MONAI Multimodal, dirancang untuk menjembatani kesenjangan antara berbagai sumber data layanan kesehatan. Mempercepat penelitian dan inovasi di bidang radiologi, bedah, dan patologi dengan mengintegrasikan data seperti CT scan, MRI, dan catatan kesehatan elektronik. Ekosistem ini didukung oleh agen AI canggih yang menggunakan agen otonom untuk inferensi multi-langkah dan model khusus yang disesuaikan untuk aplikasi medis guna mendukung integrasi data lintas modal.

Kerangka Agen MONAI adalah komponen kunci Platform Multimodal MONAI, yang memungkinkan agen AI multimodal melakukan inferensi kompleks menggunakan data gambar dan teks. Arsitektur ini menyederhanakan integrasi komponen visual dan linguistik, mendukung alur kerja khusus, dan mengurangi kompleksitas. Platform ini menggabungkan kerangka kerja yang dipimpin NVIDIA dengan inovasi dari mitra komunitas untuk menumbuhkan lingkungan kolaboratif yang mempercepat penelitian dan kolaborasi klinis.

Tim Deyer, MD, ahli radiologi dan mitra pengelola, menekankan dampak transformatif dari pengintegrasian beragam aliran data melalui model multimodal yang canggih. Dia menekankan potensi pengambilan keputusan yang lebih cepat dan lebih dapat diandalkan dalam layanan kesehatan. MONAI Multimodal mengubah penelitian AI medis dengan mengintegrasikan sumber data dan memanfaatkan model mutakhir, membantu dokter dan peneliti meningkatkan pencitraan medis dan akurasi diagnostik secara signifikan.