Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供

Cerebras Systemsは最近、同じエネルギー消費量と価格を維持しながら、前世代の2倍のパフォーマンスを誇るWafer-Scale Engine 3 （WSE-3）を発表し、AI業界での地位を高めた。Cerebras CS-3 AIスーパーコンピューターの中核であるWSE-3は、業界で最も広範なAIモデルのトレーニングを処理できるように設計されており、5nmプロセス、4兆個のトランジスタ、および125ペタフロップスのピークAIパフォーマンスを備えている。

WSE-3を搭載したCS-3スーパーコンピューターは、最大24兆のパラメータを持つAIモデルを管理するように調整されており、1.2ペタバイトに達するメモリーシステムを提供する。この機能により、パーティーショニングを必要とせずに現在のモデルの10倍の大きさのモデルをトレーニングできるようになり、トレーニングプロセスが合理化され、開発者の生産性が向上する。CS-3のスケーラビリティーは、大規模なモデルを迅速に微調整したり、フルスケールで展開したときに1日でゼロからトレーニングしたりできる能力から明らかだ。

Cerebrasはまた、PyTorch 2.0と最新のAIモデルと技術をサポートするためにソフトウェアフレームワークを更新し、動的で非構造化されたスパース性との互換性を確保し、トレーニング時間を大幅に短縮できる。同社のCEO、アンドリュー・フェルドマン氏は、複雑なAIタスクを処理するWSE-3の能力を強調し、ウエハースケールプロセッサーの誕生以来の進歩に誇りを表明した。

CS-3の設計は電力効率と使いやすさを優先しており、GPUと比較して最小限のスペースと電力要件で優れた計算パフォーマンスを提供する。大規模言語モデル（LLM）のトレーニングを簡素化し、必要なコードの量を削減し、データ並列モードでさまざまなサイズのモデルをサポートする。Cerebrasは、企業や政府を含むさまざまなセクターにわたってCS-3に対する強い需要を既に認識している。

アルゴンヌ国立研究所やメイヨークリニックなどとのセレブラスのパートナーシップは、AI研究と応用の進歩に対する同社の取り組みを反映している。さらに、G42との協力により、世界最大級のAIスーパーコンピューターが誕生し、Condor Galaxy 3も間もなくネットワークに参加する予定で、戦略的パートナーシップによって提供されるAIコンピューティング機能がさらに拡張される。CS-3の詳細については、興味のある方はCerebrasのウェブサイトをご覧ください。