Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo
%20(1).webp)
OpenAIがプロンプト基盤改善
Generatived
7:00 22/9/26
OpenAI(サンフランシスコ)は、GPT-6モデル群に向けたプロンプトキャッシュシステムの改良と運用ツールの拡充を発表した。30分以内に再利用された共有接頭辞に対して入力トークン費用を最大90%割引する仕組みを導入し、キャッシュヒット率の向上を図る構想とされる。
新たに提供されるダッシュボードでは、利用状況やヒット率の推移を可視化し、キャッシュ未ヒット時の原因特定を容易にする診断機能が備えられた模様だ。開発者は明示的なブレークポイントを設定することで、効率的なコンテキストの保持と最適化を選択可能になると分かった。
さらに推論プロセスの設定変更時にもキャッシュ状態を維持できる機能や、事前にデータを読み込むプリウォーミング機能が追加されたという。同社は長時間の指示や多段階の処理を必要とするAIエージェントの開発コストを削減し、安定した運用の推進を後押ししていく構想と報じられている。
Chia sẻ bài viết này:
Tin tức mới nhất
Kokopelli ra mắt trợ lý doanh nghiệp AI BiBi.
9:00 8/7/26
Kokopelli vừa công bố ra mắt BiBi, trợ lý AI dành cho nền tảng quản lý doanh nghiệp vừa và nhỏ Big Advance.
CDNetworks ra mắt giải pháp bảo mật phân phối nền tảng AI.
9:00 8/7/26
CDNetworks vừa công bố một giải pháp bảo mật và phân phối mới dành cho các nền tảng AI đa mô hình quản lý nhiều mô hình ngôn ngữ quy mô lớn.


%20(1).webp)
