Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

NVIDIAがAI評価指標発表
Generatived
26/9/24 7:00
NVIDIA(米国カリフォルニア州)は、自律型AIエージェントの性能を測定する評価フレームワークの分析結果を公表した。単一のテキスト出力や個別の関数呼び出しの精度だけでなく、実際の環境下で複数段階にわたる作業を完遂できるかを総合的に評価する仕組みが重視されている。
本手法では各工程の動作を検証するステップレベルのスコアと、最終的な処理結果を確認するエンドツーエンドのスコアを組み合わせて分析が行われる模様だ。呼び出しの正確性に加え、一連の処理に伴うコストや遅延時間といった観点も評価軸として盛り込まれているという。
あわせて自社モデルである『Nemotron 3.5 Lightning』を用いた検証例も提示されたとのことだ。評価指標の標準化を進めることで、企業におけるエージェント型AIの構築や導入判断を技術面から多角的に支援していく構想と報じられている。
最新のニュース
Chathamが取引検証自動化
26/10/5 7:00
Chatham Financial(米国ペンシルベニア州)は、OpenAIのモデル群を活用して金融取引の検証作業や社内ツールの開発プロセスを刷新したと発表した。
OpenAIが蒸留攻撃を防御
26/10/2 7:00
OpenAI(米国サンフランシスコ)は、モデルの思考プロセス(思考ログ)を不正に抽出して自社モデルの学習や再現に悪用する大規模な「敵対的蒸留」キャンペーンを察知し、阻止したと発表した。
Copyright © 2024 Generatived - All right Reserved.
ニュース
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
最新のニュース
Chathamが取引検証自動化
26/10/5 7:00
Chatham Financial(米国ペンシルベニア州)は、OpenAIのモデル群を活用して金融取引の検証作業や社内ツールの開発プロセスを刷新したと発表した。
OpenAIが蒸留攻撃を防御
26/10/2 7:00
OpenAI(米国サンフランシスコ)は、モデルの思考プロセス(思考ログ)を不正に抽出して自社モデルの学習や再現に悪用する大規模な「敵対的蒸留」キャンペーンを察知し、阻止したと発表した。


%20(1).webp)



