top of page

Generatived(Beta)|生成AIの最新ニュースとトレンドを提供

logo.png

OpenAIがプロンプト基盤改善

Generatived

26/9/22 7:00

OpenAI(サンフランシスコ)は、GPT-6モデル群に向けたプロンプトキャッシュシステムの改良と運用ツールの拡充を発表した。30分以内に再利用された共有接頭辞に対して入力トークン費用を最大90%割引する仕組みを導入し、キャッシュヒット率の向上を図る構想とされる。

新たに提供されるダッシュボードでは、利用状況やヒット率の推移を可視化し、キャッシュ未ヒット時の原因特定を容易にする診断機能が備えられた模様だ。開発者は明示的なブレークポイントを設定することで、効率的なコンテキストの保持と最適化を選択可能になると分かった。

さらに推論プロセスの設定変更時にもキャッシュ状態を維持できる機能や、事前にデータを読み込むプリウォーミング機能が追加されたという。同社は長時間の指示や多段階の処理を必要とするAIエージェントの開発コストを削減し、安定した運用の推進を後押ししていく構想と報じられている。

この記事を共有:

最新のニュース
OpenAIがGPT-6高速版

OpenAIがGPT-6高速版

26/10/5 7:00

OpenAI(米国サンフランシスコ)は、NVIDIAのBlackwellグラフィックス処理装置上で動作するAIモデル『GPT-6 Astra Ultrafast』の提供を開始した。

NVIDIAが映像解析基盤

NVIDIAが映像解析基盤

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、動画検索・要約基盤の最新版『Metropolis Blueprint for Video Search and Summarization (VSS) 3.3』を発表した。

NVIDIAがデスクトップ基盤

NVIDIAがデスクトップ基盤

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、パーソナルAIスーパーコンピュータ『NVIDIA DGX Spark』の新たな構成として64GBユニファイドメモリ搭載モデルを発表した。

NVIDIAがAI工場投資効果

NVIDIAがAI工場投資効果

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、メガワット級で構築されるAI工場の投資収益率(ROI)を最大化する設計戦略を公表した。

Copyright © 2024 Generatived - All right Reserved.

この記事を共有:

この記事を共有:

Generatived AI Logo

Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。

  • Facebook
  • X

フォローをお願いします

言語

最新のニュース
OpenAIがGPT-6高速版

OpenAIがGPT-6高速版

26/10/5 7:00

OpenAI(米国サンフランシスコ)は、NVIDIAのBlackwellグラフィックス処理装置上で動作するAIモデル『GPT-6 Astra Ultrafast』の提供を開始した。

NVIDIAが映像解析基盤

NVIDIAが映像解析基盤

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、動画検索・要約基盤の最新版『Metropolis Blueprint for Video Search and Summarization (VSS) 3.3』を発表した。

NVIDIAがデスクトップ基盤

NVIDIAがデスクトップ基盤

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、パーソナルAIスーパーコンピュータ『NVIDIA DGX Spark』の新たな構成として64GBユニファイドメモリ搭載モデルを発表した。

NVIDIAがAI工場投資効果

NVIDIAがAI工場投資効果

26/10/5 7:00

NVIDIA(米国カリフォルニア州)は、メガワット級で構築されるAI工場の投資収益率(ROI)を最大化する設計戦略を公表した。

bottom of page