Generatived(Beta)|生成AIの最新ニュースとトレンドを提供
.webp)
MemVerge とMicron がCXL メモリで AI を強化
Generatived
24/3/19 13:06
MemVergeは、CXLメモリーのインテリジェントな階層化を統合することで大規模言語モデルのパフォーマンスを強化するためにMicronと協力することを発表した。このパートナーシップは、GPU HBMの容量制限によって引き起こされるボトルネックを軽減することを目的としている。新しいソリューションはGTCイベントで発表され、GPU使用率と処理速度の大幅な向上が実証された。
MemVergeのCEOであるCharles Fan氏は、LLMパフォーマンスをコスト効率よく拡張するには、GPUへのデータフローを維持する必要性を強調した。Micronとの共同デモンストレーションではSupermicroサーバーを利用し、階層型メモリーの利点を紹介した。これにより、GPU効率が大幅に向上し、特定の計算タスクに必要な時間が半分になった。
このコラボレーションにより、AIワークロード管理に顕著な進歩がもたらされ、組織にパフォーマンスと効率を向上させる機会が提供された。CXLメモリーとインテリジェントなソフトウェア階層化を活用することで、企業はAI主導の取り組みを迅速化できる。MicronのRaj Narasimhan氏は、AIアプリケーションのGPUスループットを向上させる上でのCXLメモリーモジュールの価値を強調した。
MemVerge、Micron、Supermicroの共同の取り組み、およびAIワークロードにおけるCXLメモリーの可能性の詳細については、興味のある方はMemVergeのウェブサイトを参照してください。MemVergeは、クラウドとオンプレミスの両方でデータ集約型のワークロードのパフォーマンスとコストを最適化することを目指して、ビッグメモリー コンピューティングソフトウェアの革新を続けている。
最新のニュース
Remedies講談社AI校正システム導入
25/12/12 0:00
Remedies(東京都千代田区)は、講談社が開発した校正支援システム「ごじとる」に、文章校正AI「wordrabbit」を導入したと発表した。
シフトプラスAI zevo新モデル追加
25/12/12 0:00
シフトプラス(宮崎県都城市)は、自治体AI zevoに「Amazon Nova 2 Lite」と「Gemma 3 27B-IT」を追加したと発表。
Copyright © 2024 Generatived - All right Reserved.
ニュース
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
最新のニュース
Remedies講談社AI校正システム導入
25/12/12 0:00
Remedies(東京都千代田区)は、講談社が開発した校正支援システム「ごじとる」に、文章校正AI「wordrabbit」を導入したと発表した。
シフトプラスAI zevo新モデル追加
25/12/12 0:00
シフトプラス(宮崎県都城市)は、自治体AI zevoに「Amazon Nova 2 Lite」と「Gemma 3 27B-IT」を追 加したと発表。

%20(1).webp)
%20(1).webp)
%20(1).webp)


