Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供

同団体は最近、CUDAプログラミングタスクにおけるAIモデルを評価するオープンソースベンチマークであるComputeEvalを拡張し、100以上の新たな課題を追加しました。データセットは現在232の問題で構成されており、高度なCUDA機能と実世界のアプリケーションが組み込まれています。このアップデートは、複雑なコンピューティングタスクを処理するAIの能力評価を強化することを目的としています。

ComputeEvalで主要な言語モデルをいくつかテストすることで、パフォーマンス指標を確立しました。結果は、新バージョンではスコアの低下を示しており、これはAIモデルの能力低下ではなく、ベンチマークの難易度上昇を示しています。この評価により、AIはアクセラレーションコンピューティングの複雑さをより深く理解できるようになります。

同社は、CUDA-Xライブラリを追加することでComputeEvalのさらなる開発を計画しており、ハイパフォーマンスコンピューティングおよびAIコミュニティからの貢献を呼びかけています。関心のある方は、 GitHub上のコードとHugging Face上のデータセットにアクセスでき、AI支援CUDAプログラミングにおけるコラボレーションとイノベーションを促進します。