SAN FRANCISCO, 4 Juni 2025 – MLCommons® mengumumkan hasil rangkaian tolok ukur MLPerf® Training v5.0 terbarunya, yang memamerkan terobosan dalam teknologi AI. Pengajuan untuk rangkaian tolok ukur baru ini melonjak, mencapai jumlah entri tertinggi dan mencerminkan pertumbuhan industri yang pesat. Rangkaian ini menguji berbagai aspek pembelajaran mesin, termasuk model, perangkat lunak, dan perangkat keras, dan dirancang untuk mendorong inovasi dan efisiensi di lapangan.

Versi terbaru dari MLPerf Training, v5.0, memperkenalkan tolok ukur baru berdasarkan sistem Generative AI Llama 3.1 405B, model terbesar yang disertakan dalam rangkaian tersebut. Tolok ukur baru ini telah melampaui pendahulunya dalam hal jumlah pengajuan, yang menunjukkan semakin pentingnya pelatihan skala besar dalam pengembangan AI. Rangkaian tolok ukur ini ditinjau sejawat dan bersumber terbuka, menyediakan platform yang kompetitif namun tidak bias bagi para pelaku industri.

Peningkatan kinerja terlihat di semua lini, dengan benchmark Stable Diffusion dan Llama 2.0 70B LoRA menunjukkan peningkatan kecepatan yang signifikan, melampaui kecepatan kemajuan komputasi sebelumnya. Peningkatan ini menyoroti fokus industri dalam mengoptimalkan beban kerja pelatihan baru. Selain itu, benchmark RetinaNet menunjukkan peningkatan kecepatan yang signifikan pada sistem multi-simpul, yang menyoroti evolusi simbiosis AI dan sistem pendukung.

Keragaman prosesor yang diajukan telah berkembang hingga mencakup 12 prosesor berbeda, lima di antaranya telah dirilis sejak versi rangkaian tolok ukur terakhir. Kami juga melihat peningkatan sistem multi-simpul di antara prosesor yang diajukan, yang mencerminkan peningkatan beban kerja AI dan evolusi perangkat keras untuk mendukungnya. Tren ini juga terbukti karena pelatihan AI tingkat lanjut menjadi lebih mudah diakses dengan semakin banyaknya penyedia layanan cloud yang menawarkan akses ke sistem berskala besar. MLCommons akan terus berupaya memperbarui rangkaian tolok ukur untuk menangkap inovasi yang sedang berlangsung dalam AI.