Generatif (Beta) |. Memberikan berita dan tren terkini dalam AI generatif

SemiAnalysis Mengumumkan InferenceMAX, Membawa Excel ke GPU NVIDIA
Generatived
14/10/25, 09.00
SemiAnalysis telah mengumumkan InferenceMAX™ v1, sebuah inisiatif sumber terbuka yang bertujuan untuk mengevaluasi kinerja perangkat keras inferensi. Temuan inisiatif ini menunjukkan bahwa GPU NVIDIA memberikan kinerja terbaik di berbagai beban kerja. Seri Blackwell NVIDIA, khususnya, menunjukkan peningkatan kinerja yang signifikan dibandingkan generasi Hopper sebelumnya, yang menunjukkan potensi pendapatan yang signifikan.
Platform InferenceMAX v1 dilengkapi pengujian otomatis harian yang mencakup berbagai kerangka kerja dan konfigurasi inferensi. Pendekatan ini memastikan tolok ukur secara akurat mencerminkan skenario penerapan AI di dunia nyata. Pengujian komprehensif ini mencakup berbagai model dan panjang sekuens, memberikan validasi terperinci atas kinerja perangkat keras inferensi.
Arsitektur Blackwell NVIDIA menunjukkan efisiensi dan efektivitas biaya yang luar biasa dalam tolok ukur InferenceMAX v1. Dengan Tensor Core canggih dan bandwidth NVLink yang tinggi, seri Blackwell menunjukkan peningkatan yang mengesankan dalam kinerja komputasi per watt dan bandwidth memori. Peningkatan ini meningkatkan efisiensi energi dan mengurangi biaya per juta token, menjadikan platform NVIDIA sebagai pemimpin dalam penerapan AI skala besar.
Performa perangkat keras NVIDIA terus meningkat melalui optimasi perangkat lunak yang berkelanjutan. Tim teknik NVIDIA telah berupaya meningkatkan tumpukan TensorRT-LLM, yang secara signifikan meningkatkan throughput LLM sumber terbuka. Kemajuan ini, bersama dengan sifat sumber terbuka InferenceMAX v1, memungkinkan komunitas AI untuk memvalidasi dan memanfaatkan keunggulan performa NVIDIA dalam berbagai skenario inferensi AI.
Bagikan artikel ini:
Tin tức mới nhất
Sarvam AI dan NVIDIA Mempercepat Model AI Multibahasa
20/2/26, 09.00
Sarvam AI, sebuah startup AI yang berbasis di Bengaluru, India, telah memulai proyek ambisius
NVIDIA dan Nebius memamerkan manfaat alokasi parsial GPU.
20/2/26, 09.00
NVIDIA berkolaborasi dengan Nebius untuk mengevaluasi peningkatan kinerja alokasi GPU parsial NVIDIA Run:ai untuk inferensi model bahasa skala besar (LLM).
Microsoft akan menyumbangkan $50 miliar untuk AI di negara-negara Selatan.
20/2/26, 09.00
Tại Hội nghị thượng đỉnh Tác động AI Ấn Độ, Microsoft đã công bố cam kết đầu tư 50 tỷ đô la vào cuối năm 2020 để cải thiện khả năng tiếp cận AI ở các nước đang phát triển.
Copyright © 2024 Generatived - All right Reserved.
Bagikan artikel ini:
Bagikan artikel ini:
Kategori
Berita
AI dan hukum/peraturan/masyarakat
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.
Berita terkini
Sarvam AI dan NVIDIA Mempercepat Model AI Multibahasa
20/2/26, 09.00
Sarvam AI, sebuah startup AI yang berbasis di Bengaluru, India, telah memulai proyek ambisius
NVIDIA dan Nebius memamerkan manfaat alokasi parsial GPU.
20/2/26, 09.00
NVIDIA berkolaborasi dengan Nebius untuk mengevaluasi peningkatan kinerja alokasi GPU parsial NVIDIA Run:ai untuk inferensi model bahasa skala besar (LLM).
Microsoft akan menyumbangkan $50 miliar untuk AI di negara-negara Selatan.
20/2/26, 09.00
Tại Hội nghị thượng đỉnh Tác động AI Ấn Độ, Microsoft đã công bố cam kết đầu tư 50 tỷ đô la vào cuối năm 2020 để cải thiện khả năng tiếp cận AI ở các nước đang phát triển.


%20(1).webp)

%20(1).webp)

