top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

NVIDIAがAI評価指標発表

Generatived

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、自律型AIエージェントの性能を測定する評価フレームワークの分析結果を公表した。単一のテキスト出力や個別の関数呼び出しの精度だけでなく、実際の環境下で複数段階にわたる作業を完遂できるかを総合的に評価する仕組みが重視されている。

本手法では各工程の動作を検証するステップレベルのスコアと、最終的な処理結果を確認するエンドツーエンドのスコアを組み合わせて分析が行われる模様だ。呼び出しの正確性に加え、一連の処理に伴うコストや遅延時間といった観点も評価軸として盛り込まれているという。

あわせて自社モデルである『Nemotron 3.5 Lightning』を用いた検証例も提示されたとのことだ。評価指標の標準化を進めることで、企業におけるエージェント型AIの構築や導入判断を技術面から多角的に支援していく構想と報じられている。

この記事を共有:

最新のニュース
Google Cloud基盤拡大

Google Cloud基盤拡大

26/9/23 7:00

Google Cloud(米国カリフォルニア州)は、新興企業向けにおける「Gemini Enterprise」をはじめとしたAI基盤の利用拡大を発表した。

OpenAIが講師養成講習開始

OpenAIが講師養成講習開始

26/9/23 7:00

OpenAI(サンフランシスコ)は、AIスキルの普及を目的とした『OpenAI Academy Community Trainer Program』の試行運用を発表した。

OpenAIのCEOが国連演説

OpenAIのCEOが国連演説

26/9/23 7:00

OpenAI(サンフランシスコ)のCEOであるサム・アルトマン氏が、国連安全保障理事会において演説を行った。

OpenAIがAI会話ベンチマーク公開

OpenAIがAI会話ベンチマーク公開

26/9/22 7:00

OpenAI(サンフランシスコ)は、メンタルヘルスに関するAIモデルの応答品質を測定するオープン評価指標『MentalHealthBench』を発表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
Google Cloud基盤拡大

Google Cloud基盤拡大

26/9/23 7:00

Google Cloud(米国カリフォルニア州)は、新興企業向けにおける「Gemini Enterprise」をはじめとしたAI基盤の利用拡大を発表した。

OpenAIが講師養成講習開始

OpenAIが講師養成講習開始

26/9/23 7:00

OpenAI(サンフランシスコ)は、AIスキルの普及を目的とした『OpenAI Academy Community Trainer Program』の試行運用を発表した。

OpenAIのCEOが国連演説

OpenAIのCEOが国連演説

26/9/23 7:00

OpenAI(サンフランシスコ)のCEOであるサム・アルトマン氏が、国連安全保障理事会において演説を行った。

OpenAIがAI会話ベンチマーク公開

OpenAIがAI会話ベンチマーク公開

26/9/22 7:00

OpenAI(サンフランシスコ)は、メンタルヘルスに関するAIモデルの応答品質を測定するオープン評価指標『MentalHealthBench』を発表した。

bottom of page