NVIDIA telah menjadi yang terdepan dalam memenuhi tuntutan komputasi model AI yang terus meningkat, yang jumlah parameternya telah meroket dari jutaan menjadi triliunan. Diperkenalkan pada tahun 2016, teknologi NVLink perusahaan ini memainkan peran penting dalam meningkatkan komunikasi antar-GPU dan menciptakan ruang memori terpadu, mengatasi keterbatasan PCIe untuk komputasi performa tinggi dan beban kerja AI. Evolusi NVLink telah ditandai dengan tonggak-tonggak penting, seperti peluncuran teknologi switch NVLink pada tahun 2018, yang menghadirkan bandwidth 300 GB/dtk antar GPU dalam topologi delapan GPU. Kemajuan ini meletakkan fondasi bagi era jaringan komputasi multi-GPU saat ini.

Generasi terbaru, NVLink Gen 5, yang akan dirilis pada tahun 2024, akan menawarkan komunikasi omnidirectional yang luar biasa sebesar 1.800 GB/dtk antara 72 GPU, menghasilkan total bandwidth sebesar 130 TB/dtk—800 kali lebih besar daripada generasi pertama. Komitmen NVIDIA terhadap inovasi terbukti dalam penyempurnaan berkelanjutannya pada NVLink, yang merilis generasi baru setiap tahunnya untuk menjawab kompleksitas dan kebutuhan komputasi model AI yang berkembang pesat. Performa perangkat keras ditingkatkan oleh NVIDIA Collective Communication Library (NCCL), sebuah pustaka sumber terbuka yang dirancang untuk mengoptimalkan komunikasi GPU dan terintegrasi secara mulus dengan kerangka kerja pembelajaran mendalam utama.

Untuk meningkatkan produktivitas pabrik AI, perangkat keras NVIDIA dan teknologi NVLink berperan penting dalam memenuhi kebutuhan komputasi inferensi AI. Arsitektur rak 72-GPU berperan penting dalam mencapai kinerja inferensi yang optimal di berbagai kasus penggunaan. Memaksimalkan pendapatan di pabrik AI membutuhkan keseimbangan antara throughput per watt dan latency, dan area di bawah kurva Pareto frontier berfungsi sebagai tolok ukur. Kinerja sangat bervariasi tergantung pada konfigurasi peningkatan skala, yang menyoroti pentingnya komunikasi berkecepatan tinggi NVLink dalam meningkatkan throughput dan mengurangi latency.

Untuk mendukung hyperscaler lebih lanjut, NVIDIA mengumumkan NVLink Fusion, yang menyediakan akses ke teknologi fabric NVLink scale-up yang komprehensif. Solusi ini memungkinkan integrasi silikon kustom ke dalam arsitektur skala rak NVIDIA, memberikan solusi serbaguna untuk berbagai konfigurasi, termasuk CPU dan XPU kustom. NVLink Fusion hadir sebagai solusi modular yang kompatibel dengan arsitektur rak Open Compute Project (OCP) MGX, memberikan fleksibilitas dan kemudahan integrasi. Konfigurasi XPU kustom memanfaatkan IP Universal Chiplet Interconnect Express (UCIe) untuk antarmuka, sementara konfigurasi CPU kustom merekomendasikan integrasi IP NVIDIA NVLink-C2C untuk konektivitas ke GPU NVIDIA.

NVLink Fusion didukung oleh ekosistem mitra yang tangguh, memungkinkan dukungan yang luas dan proses desain yang cepat. Ekosistem ini, dikombinasikan dengan arsitektur rak OCP MGX dan responsivitas rantai pasokan, memungkinkan pelanggan untuk mempercepat waktu pemasaran. NVLink NVIDIA merupakan kemajuan besar dalam memenuhi tuntutan komputasi inferensi AI, memberikan performa dan opsi kustomisasi yang tak tertandingi bagi para hyperscaler.