top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

NVIDIA AIエージェント評価解説

Generatived

26/5/27 9:00

NVIDIA(米カリフォルニア州)は、AIモデル評価とAIエージェント評価の違いを整理した技術解説を公開した。静的ベンチマーク中心のモデル評価に対し、エージェント評価では実運用環境での挙動確認が重要になるとしている。

同社によると、AIエージェント評価ではTask Success RateやTool Call Accuracy、Trajectory Efficiencyなどを重視する必要があるという。最終回答だけでなく、推論経路やツール利用履歴を含めた検証が求められると説明した。

また、API利用時のスキーマ準拠やツール選択精度、トークン消費量、処理遅延なども重要指標になると指摘した。推論品質とコスト効率を同時に管理する評価設計が必要とみられる。

NVIDIAは、評価主導型開発を支援する「NeMo Agent Toolkit」を紹介した。同ツールは既存フレームワークへ接続し、エージェントの軌跡やツール呼び出し、成果指標を可視化できるという。

この記事を共有:

最新のニュース
SARUCREW AIエージェント全社導入

SARUCREW AIエージェント全社導入

26/6/25 9:00

SARUCREW(東京都渋谷区)は、自社開発のAIエージェント「Godrilla」を全社導入し、広告運用業務で最大90%のリードタイム削減を実現したと発表した。

イノーバAIコンテンツ内製支援開始

イノーバAIコンテンツ内製支援開始

26/6/24 9:00

イノーバ(東京都新宿区)は、生成AIを活用した「コンテンツ制作内製化支援サービス」の提供を開始したと発表した。

日立ソリューションズCloudflare提供

日立ソリューションズCloudflare提供

26/6/24 9:00

日立ソリューションズ(東京都品川区)は、Cloudflareとディストリビューター契約を締結し、AIエージェント開発からゼロトラストを含むセキュリティまで支援する「Cloudflare」の提供を6月22日に開始すると発表した。

グラファー国産ソブリンAI検証

グラファー国産ソブリンAI検証

26/6/24 9:00

グラファー(東京都渋谷区)は、デジタル庁が公開した「ガバメントAI 源内」のOSSコードを活用し、国産クラウドと国産LLMを組み合わせた国内完結型のソブリンAI環境を構築し、技術検証を実施したと発表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
SARUCREW AIエージェント全社導入

SARUCREW AIエージェント全社導入

26/6/25 9:00

SARUCREW(東京都渋谷区)は、自社開発のAIエージェント「Godrilla」を全社導入し、広告運用業務で最大90%のリードタイム削減を実現したと発表した。

イノーバAIコンテンツ内製支援開始

イノーバAIコンテンツ内製支援開始

26/6/24 9:00

イノーバ(東京都新宿区)は、生成AIを活用した「コンテンツ制作内製化支援サービス」の提供を開始したと発表した。

日立ソリューションズCloudflare提供

日立ソリューションズCloudflare提供

26/6/24 9:00

日立ソリューションズ(東京都品川区)は、Cloudflareとディストリビューター契約を締結し、AIエージェント開発からゼロトラストを含むセキュリティまで支援する「Cloudflare」の提供を6月22日に開始すると発表した。

グラファー国産ソブリンAI検証

グラファー国産ソブリンAI検証

26/6/24 9:00

グラファー(東京都渋谷区)は、デジタル庁が公開した「ガバメントAI 源内」のOSSコードを活用し、国産クラウドと国産LLMを組み合わせた国内完結型のソブリンAI環境を構築し、技術検証を実施したと発表した。

bottom of page