Para peneliti NVIDIA mendemonstrasikan terobosan dalam kecerdasan umum buatan (AGI) dengan memenangkan kompetisi bergengsi Kaggle. Ivan Sorokin dan Jean-Francois Puget, mewakili NVIDIA Kaggle Grandmasters, memuncaki papan peringkat Kaggle ARC Prize 2025. Pendekatan inovatif mereka mencapai skor 27,64% menggunakan varian model 4B yang mengungguli model skala besar, menghasilkan hasil yang hemat biaya dalam inferensi bergaya AGI.

Benchmark ARC-AGI, yang dikenal karena mengevaluasi secara ketat kemampuan penalaran abstrak sistem AI, menjadi fondasi kompetisi ini. Versi ARC-AGI-2 yang diperbarui meningkatkan tingkat kesulitan dengan menghilangkan tumpang tindih dengan data pelatihan publik, memungkinkan pengukuran yang lebih akurat atas kemampuan AI untuk mengabstraksi dan menggeneralisasi dari sejumlah kecil contoh. Keberhasilan NVIDIA dalam benchmark ini dipandang sebagai indikator penting kemajuan kemampuan AI untuk melakukan tugas-tugas inferensi tujuan umum.

Tim pemenang NVIDIA, NVARC, menggunakan strategi unik yang berbeda dari model skala besar dan teknik pencarian yang menyeluruh. Mereka mengembangkan solusi mereka dengan fokus pada pembuatan data sintetis, pelatihan pada waktu pengujian, dan rekayasa yang cermat. Dengan menciptakan korpus sintetis tugas-tugas bergaya ARC dan melatih model yang lebih kecil dan lebih cepat, NVARC menetapkan standar kinerja baru pada benchmark ARC-AGI-2. Pendekatan mereka menunjukkan potensi data sintetis dan pembelajaran adaptif untuk memajukan inferensi AI.

Metode tim ini didukung oleh toolkit NeMo NVIDIA, yang mencakup sumber daya untuk pembelajaran penguatan dan penyederhanaan alur kerja pembuatan data sintetis. Detail teknis solusi unggulan NVARC tersedia di Kaggle, dan Anda dapat mempelajari lebih lanjut dalam wawancara dengan tim ARC ini.