top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

Cloud Run が NVIDIA RTX PRO 6000 のサポートを導入

Generatived

26/2/4 9:00

最近の開発で、サーバーレスコンピューティングプラットフォームがCloud RunサービスでNVIDIA RTX PRO™ 6000 Blackwell Server Edition GPUのサポートを開始しました。現在プレビュー段階にあるこの新機能により、ユーザーはGemma 3 27BやLlama 3.1 70Bといった大規模推論モデルを容易にデプロイでき、手動によるクラスタ管理やVMメンテナンスの手間が省けます。

NVIDIA RTX PRO 6000 Blackwell GPUは、前世代のNVIDIA L4 GPUと比べて大幅なパフォーマンス向上を実現しています。96GBのvGPUメモリと1.6TB/sの帯域幅を誇り、700億を超えるパラメータを持つモデルの処理を可能にします。ユーザーは、事前予約なしで、これらのGPUをCloud Runサービス、ジョブ、またはワーカープールにオンデマンドで接続できるようになりました。

このプラットフォームはFP4精度をサポートしているため、NVIDIA RTX PRO 6000 Blackwell GPUは生成AIや推論タスクの高速化に最適です。リアルタイム生成AIアプリケーションの作成を容易にし、Cloud Runサービスの迅速なスケーリングを可能にします。さらに、GPU対応ワーカープールを通じて、特殊なワークロード向けにカスタマイズされたスケーリングオプションも提供します。

Cloud Runは、本番環境でのGPUアクセラレーションタスクの実行を簡素化するように設計されています。マネージドGPUに柔軟なコンピューティングオプションを提供し、ゾーン冗長性により本番環境レベルの信頼性を確保します。このサービスはクラウドエコシステム全体と緊密に統合されており、シームレスな運用を可能にします。NVIDIA RTX PRO 6000 Blackwell GPUは一部のリージョンでご利用いただけます。ユーザーは、Cloud Run上でOllamaを使用してその機能を試してみることをお勧めします。

この記事を共有:

最新のニュース
NVIDIAが機密計算技術検証

NVIDIAが機密計算技術検証

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。

MicrosoftがGPT6提供

MicrosoftがGPT6提供

26/9/24 7:00

Microsoft(米国ワシントン州)は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。

NVIDIAがウイルス構造公開

NVIDIAがウイルス構造公開

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。

NVIDIAが新評価指標発表

NVIDIAが新評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、推論サーバー向けソフトウェアにおけるAIコーディングエージェントの性能を測定する新評価指標『SWE-Serve』を発表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
NVIDIAが機密計算技術検証

NVIDIAが機密計算技術検証

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。

MicrosoftがGPT6提供

MicrosoftがGPT6提供

26/9/24 7:00

Microsoft(米国ワシントン州)は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。

NVIDIAがウイルス構造公開

NVIDIAがウイルス構造公開

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。

NVIDIAが新評価指標発表

NVIDIAが新評価指標発表

26/9/24 7:00

NVIDIA(米国カリフォルニア州)は、推論サーバー向けソフトウェアにおけるAIコーディングエージェントの性能を測定する新評価指標『SWE-Serve』を発表した。

bottom of page