Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供
MiniMax M2.7 NVIDIAで公開開始新版β
Generatived
26/4/15 9:00
MiniMax M2.7の公開により、既存のM2.5を拡張したエージェント向けMoEモデルが提供され、NVIDIAおよびオープンソース推論環境で利用可能になったとされる。大規模MoE設計や長文コンテキスト200K対応などの特徴も含むと説明される
vLLMやSGLangへの最適化としてQK RMSNormやFP8 MoEカーネルが統合され、Blackwell Ultra GPU環境でスループット最大2.7倍改善が報告されたとされるMoEルーティング最適化によりレイテンシ削減も確認とのこと
vLLM・SGLangのデプロイ手順ではtensor parallelやMoE対応フラグが提示され、エンタープライズ環境での高速推論実行が容易になる構成とされる。またNVIDIAエンドポイントやNIMマイクロサービスでの展開も想定とされる。
NVIDIA NeMoフレームワークやHugging Face上のチェックポイントを活用し、MiniMax M2.7のファインチューニングやRL学習が可能と案内されたとされるオープンウェイト提供によりエージェント用途拡張も期待とされるとされる。
最新のニュース
%20(1).webp)
イー・エージェンシーがAI基盤開始
26/8/31 7:00
イー・エージェンシー（東京都品川区）は、複数の人工知能が協働して業務を完遂するデータ分析・活用基盤「Data King」のサービス提供を開始した。
Copyright © 2024 Generatived - All right Reserved.
ニュース
フォローをお願いします
言語
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
フォローをお願いします
言語
最新のニュース
イー・エージェンシーがAI基盤開始
26/8/31 7:00
イー・エージェンシー（東京都品川区）は、複数の人工知能が協働して業務を完遂するデータ分析・活用基盤「Data King」のサービス提供を開始した。