top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

Kaggle Game Arenaが新たなAIBenchmarkプラットフォームを発表

Generatived

25/8/6 9:00

Kaggle Game Arenaの導入は、AIベンチマークに大きな転換をもたらします。これは、AIモデルを戦略ゲームで互いに競わせるものです。この新しいプラットフォームは、モデルの問題解決能力を十分に捉えきれない可能性のある従来のベンチマークを凌駕し、AI能力の動的かつ検証可能な指標を提供することを目指しています。このプラットフォームに選ばれたゲームは、戦略的推論や長期計画など、幅広いスキルをテストするように設計されており、AIの総合的な知能をより明確に示すものとなっています。

KaggleでホストされているGame Arenaは、AI評価のための透明性と標準化された環境を提供します。オープンソースのゲームハーネスと環境によって公平性が確保され、全プレイヤーが参加するシステムによって堅牢なランキング結果が保証されます。このプラットフォームは、 Google DeepMindがゲームを用いてAIの進歩を披露してきた歴史に着想を得ており、AIモデルの進化に合わせて難易度が上昇する、常に成長するベンチマークを促進することを目的としています。

8月5日には、8つの上級モデルがシングルエリミネーション方式で競い合うチェスのエキシビショントーナメントが開催されます。トップチェス専門家による解説付きのこのイベントは、Game Arenaの評価アプローチの好例となるでしょう。エキシビションはトーナメント形式で行われますが、最終ランキングは包括的なオールプレイオール方式に基づいて決定され、結果はKaggleのウェブサイトで公開されます。

Kaggleは今後、囲碁やポーカーといった定番ゲームに加え、ビデオゲームなどを含む新たな課題を追加し、Game Arenaを拡張していく予定です。これらの新たな課題は、AIの複雑な計画・推論能力をテストし、包括的かつ継続的に進化するAIベンチマークの構築に貢献します。新しいモデルとハーネスを定期的に導入することで、AIの能力を新たな高みへと押し上げることを目指しています。Game Arenaと今後開催されるチェストーナメントの詳細については、Kaggleのブログをご覧ください。

この記事を共有:

最新のニュース
NVIDIAが機密計算技術検証

NVIDIAが機密計算技術検証

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。

MicrosoftがGPT6提供

MicrosoftがGPT6提供

26/9/24 7:00

Microsoft(米国ワシントン州)は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。

NVIDIAがウイルス構造公開

NVIDIAがウイルス構造公開

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。

NVIDIAが新評価指標発表

NVIDIAが新評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、推論サーバー向けソフトウェアにおけるAIコーディングエージェントの性能を測定する新評価指標『SWE-Serve』を発表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
NVIDIAが機密計算技術検証

NVIDIAが機密計算技術検証

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。

MicrosoftがGPT6提供

MicrosoftがGPT6提供

26/9/24 7:00

Microsoft(米国ワシントン州)は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。

NVIDIAがウイルス構造公開

NVIDIAがウイルス構造公開

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。

NVIDIAが新評価指標発表

NVIDIAが新評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、推論サーバー向けソフトウェアにおけるAIコーディングエージェントの性能を測定する新評価指標『SWE-Serve』を発表した。

bottom of page