Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供

サンフランシスコ、2025年5月29日 – MLCommonsは、様々なモデル、言語、ツールにわたるAI信頼性測定の強化を目指し、AILuminateベンチマークの拡張を発表しました。同社は、インドの主要な技術業界団体であるNASSCOMと協力し、これらのAI信頼性ベンチマークを南アジア市場に導入します。この取り組みには、インドのニーズに合わせたヒンディー語ベンチマークの開発と、より幅広い大規模言語モデル（LLM）向けの新しい信頼性グレードの導入が含まれます。

NASSCOMとの提携は、標準化されたAIベンチマークを確立するというMLCommonsのグローバル戦略の一環です。このアプローチは、東アジアのAIベンチマークで既に大きな進歩を遂げているシンガポールのAI Verify Foundationおよびシンガポール国立大学との既存の協力関係に類似しています。新しいベンチマークは、業界の専門家、政策立案者、そして学者からの意見を取り入れながら共同で設計され、地域にとって信頼性が高く、関連性のあるものにします。

NASSCOMとのパートナーシップに加え、MLCommonsは、更新されたLLMスイート向けに新たな信頼性グレードを展開します。これらのグレードは、幅広いテストプロンプトに対するモデルの応答に基づいて決定されます。プロンプトに関する事前知識や評価モデルへのアクセスは不要であるため、方法論の厳密性が確保されます。更新されたグレードは、企業がチャットボットやその他のAI駆動型ツールを自社製品に統合する際のリスク評価を支援することを目的としています。

MLPerfベンチマークで知られるMLCommonsは、オープンエンジニアリングコンソーシアムとして、AIベンチマークをリードし続けています。世界的なテクノロジープロバイダーや学術研究者を含む125を超えるメンバーを擁するMLCommonsは、共同エンジニアリング、ベンチマーク、公開データセット、AIリスクおよび信頼性評価を通じて、AIの改善に取り組んでいます。