Generatif (Beta) |. Memberikan berita dan tren terkini dalam AI generatif

SemiAnalysis Mengumumkan InferenceMAX, Membawa Excel ke GPU NVIDIA
Generatived
14/10/25, 09.00
SemiAnalysis telah mengumumkan InferenceMAX™ v1, sebuah inisiatif sumber terbuka yang bertujuan untuk mengevaluasi kinerja perangkat keras inferensi. Temuan inisiatif ini menunjukkan bahwa GPU NVIDIA memberikan kinerja terbaik di berbagai beban kerja. Seri Blackwell NVIDIA, khususnya, menunjukkan peningkatan kinerja yang signifikan dibandingkan generasi Hopper sebelumnya, yang menunjukkan potensi pendapatan yang signifikan.
Platform InferenceMAX v1 dilengkapi pengujian otomatis harian yang mencakup berbagai kerangka kerja dan konfigurasi inferensi. Pendekatan ini memastikan tolok ukur secara akurat mencerminkan skenario penerapan AI di dunia nyata. Pengujian komprehensif ini mencakup berbagai model dan panjang sekuens, memberikan validasi terperinci atas kinerja perangkat keras inferensi.
Arsitektur Blackwell NVIDIA menunjukkan efisiensi dan efektivitas biaya yang luar biasa dalam tolok ukur InferenceMAX v1. Dengan Tensor Core canggih dan bandwidth NVLink yang tinggi, seri Blackwell menunjukkan peningkatan yang mengesankan dalam kinerja komputasi per watt dan bandwidth memori. Peningkatan ini meningkatkan efisiensi energi dan mengurangi biaya per juta token, menjadikan platform NVIDIA sebagai pemimpin dalam penerapan AI skala besar.
Performa perangkat keras NVIDIA terus meningkat melalui optimasi perangkat lunak yang berkelanjutan. Tim teknik NVIDIA telah berupaya meningkatkan tumpukan TensorRT-LLM, yang secara signifikan meningkatkan throughput LLM sumber terbuka. Kemajuan ini, bersama dengan sifat sumber terbuka InferenceMAX v1, memungkinkan komunitas AI untuk memvalidasi dan memanfaatkan keunggulan performa NVIDIA dalam berbagai skenario inferensi AI.
Bagikan artikel ini:
Tin tức mới nhất
NVIDIA Luncurkan Dynamo 1.0 untuk Peningkatan Performa AI
18/3/26, 09.00
NVIDIA telah meluncurkan Dynamo 1.0, sebuah kerangka kerja AI baru yang dirancang untuk meningkatkan kinerja AI generatif dan model penalaran di lingkungan terdistribusi.
NVIDIA Meluncurkan Groq 3 LPX untuk Sistem AI Agenik
18/3/26, 09.00
NVIDIA telah memperkenalkan Groq 3 LPX, akselerator inferensi skala rak baru yang dirancang khusus untuk memenuhi kebutuhan sistem berbasis agen.
Microsoft Memperluas Platform AI dengan Kolaborasi NVIDIA
18/3/26, 09.00
Microsoft telah mengumumkan perluasan kemampuan AI-nya melalui kolaborasi dengan NVIDIA
Copyright © 2024 Generatived - All right Reserved.
Bagikan artikel ini:
Bagikan artikel ini:
Kategori
Berita
AI dan hukum/peraturan/masyarakat
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.
Berita terkini
NVIDIA Luncurkan Dynamo 1.0 untuk Peningkatan Performa AI
18/3/26, 09.00
NVIDIA telah meluncurkan Dynamo 1.0, sebuah kerangka kerja AI baru yang dirancang untuk meningkatkan kinerja AI generatif dan model penalaran di lingkungan terdistribusi.
NVIDIA Meluncurkan Groq 3 LPX untuk Sistem AI Agenik
18/3/26, 09.00
NVIDIA telah memperkenalkan Groq 3 LPX, akselerator inferensi skala rak baru yang dirancang khusus untuk memenuhi kebutuhan sistem berbasis agen.
Microsoft Memperluas Platform AI dengan Kolaborasi NVIDIA
18/3/26, 09.00
Microsoft telah mengumumkan perluasan kemampuan AI-nya melalui kolaborasi dengan NVIDIA


%20(1).webp)



