top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

NVIDIA MLPerf推論で最高性能達成

Generatived

26/4/3 9:00

NVIDIA(米国カリフォルニア州)は、MLPerf Inference v6.0において最新GPU「Blackwell Ultra」を用いたシステムが、複数のモデルとシナリオで最高水準の推論性能を記録したと明らかにしたとされる。累計のベンチマーク勝利数は291件に達し、他社合計の約9倍に拡大したという。

同社によると、新たに追加されたDeepSeek-R1やQwen3-VLなどのテストでも、全モデルで結果を提出した唯一のプラットフォームとなり、高いスループットを示したと伝えられる。特にインタラクティブ推論では応答速度と初期トークン生成時間の改善が確認されたとされる。

さらに、TensorRT-LLMなどソフトウェア最適化により、同一ハードウェアで最大2.7倍の性能向上を達成したと説明される。これによりトークン生成コストの低減や既存インフラの活用効率向上が期待されるとみられる。

加えて、複数システムをInfiniBandで接続した構成では、秒間数百万トークン規模の処理能力を実現したとされる。こうした成果は、AIインフラ設計におけるハードとソフトの統合最適化の重要性を示すものと位置付けられている。

この記事を共有:

最新のニュース
NVIDIAがAI評価指標発表

NVIDIAがAI評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、自律型AIエージェントの性能を測定する評価フレームワークの分析結果を公表した。

NVIDIAがCT解析基盤発表

NVIDIAがCT解析基盤発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、3D CT検査の画像解析に特化したAIモデル『NV-Reason-CT』を発表した。

MSがFoundry機能拡充

MSがFoundry機能拡充

26/9/24 7:00

Microsoft(米国ワシントン州)は、AIエージェント構築プラットフォーム『Microsoft Foundry』の機能強化を発表した。

NVIDIAが複数GPU推論機能を発表

NVIDIAが複数GPU推論機能を発表

26/9/23 7:00

NVIDIA(米国カリフォルニア州)は、生成AIの推論処理を複数のGPUに分散させて高速化する新機能「TensorRTマルチデバイス推論」およびその基盤となる「Dynamo-Triton」の最新版を公表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
NVIDIAがAI評価指標発表

NVIDIAがAI評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、自律型AIエージェントの性能を測定する評価フレームワークの分析結果を公表した。

NVIDIAがCT解析基盤発表

NVIDIAがCT解析基盤発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、3D CT検査の画像解析に特化したAIモデル『NV-Reason-CT』を発表した。

MSがFoundry機能拡充

MSがFoundry機能拡充

26/9/24 7:00

Microsoft(米国ワシントン州)は、AIエージェント構築プラットフォーム『Microsoft Foundry』の機能強化を発表した。

NVIDIAが複数GPU推論機能を発表

NVIDIAが複数GPU推論機能を発表

26/9/23 7:00

NVIDIA(米国カリフォルニア州)は、生成AIの推論処理を複数のGPUに分散させて高速化する新機能「TensorRTマルチデバイス推論」およびその基盤となる「Dynamo-Triton」の最新版を公表した。

bottom of page