Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供
MiniMax M2.7 NVIDIAで公開開始新版β
Generatived
26/4/15 9:00
MiniMax M2.7の公開により、既存のM2.5を拡張したエージェント向けMoEモデルが提供され、NVIDIAおよびオープンソース推論環境で利用可能になったとされる。大規模MoE設計や長文コンテキスト200K対応などの特徴も含むと説明される
vLLMやSGLangへの最適化としてQK RMSNormやFP8 MoEカーネルが統合され、Blackwell Ultra GPU環境でスループット最大2.7倍改善が報告されたとされるMoEルーティング最適化によりレイテンシ削減も確認とのこと
vLLM・SGLangのデプロイ手順ではtensor parallelやMoE対応フラグが提示され、エンタープライズ環境での高速推論実行が容易になる構成とされる。またNVIDIAエンドポイントやNIMマイクロサービスでの展開も想定とされる。
NVIDIA NeMoフレームワークやHugging Face上のチェックポイントを活用し、MiniMax M2.7のファインチューニングやRL学習が可能と案内されたとされるオープンウェイト提供によりエージェント用途拡張も期待とされるとされる。
最新のニュース
%20(1).webp)
NVIDIAがAI基盤の更新発表
26/9/28 7:00
NVIDIA（米国カリフォルニア州）は、自律型AIエージェントのアクセス制御を担うオープンソース実行基盤『OpenShell 0.1.0』を発表した。
Copyright © 2024 Generatived - All right Reserved.
ニュース
フォローをお願いします
言語
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
フォローをお願いします
言語
最新のニュース
NVIDIAがAI基盤の更新発表
26/9/28 7:00
NVIDIA（米国カリフォルニア州）は、自律型AIエージェントのアクセス制御を担うオープンソース実行基盤『OpenShell 0.1.0』を発表した。