Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供
%20(1).webp)
NVIDIAがエージェントAI基盤強化
Generatived
26/5/8 9:00
NVIDIA（米カリフォルニア州）は、生成AIがチャットボット中心の利用から、自律的にツールやサブエージェントを活用する「Agentic AI」へ移行しているとの分析を公表した。トークン消費量や長文コンテキスト需要が急増しているという。
同社によると、エージェント型AIは従来型チャット比で最大15倍のトークンを消費するケースがある。複数のツール呼び出しやサブエージェント処理、コンテキスト圧縮などが加わることで、推論コストやレイテンシー要件が大幅に高まるとしている。
また、長大なコンテキスト処理を支える基盤として「Vera Rubin NVL72」や「Groq 3 LPX」、NVLink 6、BlueField-4などを組み合わせた極限協調設計（Extreme Co-Design）戦略を紹介した。大規模MoEモデル向け推論効率改善を狙う。
さらに、DynamoやTRT-LLM WideEP、Speculative Decodingなどのソフトウェア群も公開した。400Kコンテキスト規模でも毎秒400超のトークン生成性能を目指し、エージェントAIの実用化加速につなげる考えを示した。
最新のニュース
NVIDIAが機密計算技術検証
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。
MicrosoftがGPT6提供
26/9/24 7:00
Microsoft（米国ワシントン州）は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。
NVIDIAがウイルス構造公開
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。
%20(1).webp)
Copyright © 2024 Generatived - All right Reserved.
ニュース
フォローをお願いします
言語
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
フォローをお願いします
言語
最新のニュース
NVIDIAが機密計算技術検証
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。
MicrosoftがGPT6提供
26/9/24 7:00
Microsoft（米国ワシントン州）は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。
NVIDIAがウイルス構造公開
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。