Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供
NVIDIA nvCOMPでAI学習コスト削減効果拡大
Generatived
26/4/13 9:00
NVIDIA（米国カリフォルニア州）は、LLM学習におけるチェックポイント処理の効率化手法として、GPU上での圧縮技術「nvCOMP」の有効性が高まっていると明らかにしたとみられる。巨大モデルでは保存データが数百GB規模となり、頻繁な書き込みがコスト増要因となる状況にあるという。
同社によると、従来の同期型チェックポイントでは書き込み中にGPUが停止し、月間で数十時間の待機時間が発生するケースが確認されているとされる。特に大規模環境では、この待機が数十万ドル規模の損失につながる可能性があるとの見方が示されている。
こうした課題に対し、GPU上での圧縮処理を導入することで、保存データ量を約20〜30％削減しつつ、書き込み時間の短縮が可能になるとされる。圧縮と書き込みを並行処理することで、追加の遅延を抑えながら効率化が図られる点が特徴とされている。
導入は既存の保存処理を一部置き換えるのみで実現可能とされ、追加の開発負荷も限定的とみられる。モデルの大規模化が進む中、 チェックポイント最適化はコスト管理の重要な要素として位置付けられていく見通しとされる。
最新のニュース
WOW WORLD、WEBCAS e-mailに生成AI機能を搭載
26/9/1 7:00
WOW WORLD（品川区）は、自社が提供するメール配信システム「WEBCAS e-mail」において、生成AIを活用した「件名・プリヘッダー提案機能」および「テキストメール自動生成機能」の提供を開始した。
%20(1).webp)
FIXER、草加市にSovereign GaiXerを導入
26/9/1 7:00
FIXER（港区）は、自社が提供するオンプレミス型生成AIアプライアンス「Sovereign GaiXer（ソブリン ガイザー）」を埼玉県草加市へ導入したと発表した。
%20(1).webp)
セールスフォース、ギブリーのAdaptive Websites世界初導入を発表
26/9/1 7:00
セールスフォース・ジャパン（千代田区）は、ギブリー（渋谷区）が「Agentforce Marketing」などの自社製品群を全面導入し、AIエージェントを活用したWebサイト個別化ソリューション「Adaptive Websites」を世界で初めて本番稼働させたと発表した。
%20(1).webp)
Copyright © 2024 Generatived - All right Reserved.
ニュース
フォローをお願いします
言語
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
フォローをお願いします
言語
最新のニュース
WOW WORLD、WEBCAS e-mailに生成AI機能を搭載
26/9/1 7:00
WOW WORLD（品川区）は、自社が提供するメール配信システム「WEBCAS e-mail」において、生成AIを活用した「件名・プリヘッダー提案機能」および「テキストメール自動生成機能」の提供を開始した。
FIXER、草加市にSovereign GaiXerを導入
26/9/1 7:00
FIXER（港区）は、自社が提供するオンプレミス型生成AIアプライアンス「Sovereign GaiXer（ソブリン ガイザー）」を埼玉県草加市へ導入したと発表した。
セールスフォース、ギブリーのAdaptive Websites世界初導入を発表
26/9/1 7:00
セールスフォース・ジャパン（千代田区）は、ギブリー（渋谷区）が「Agentforce Marketing」などの自社製品群を全面導入し、AIエージェントを活用したWebサイト個別化ソリューション「Adaptive Websites」を世界で初めて本番稼働させたと発表した。