top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

Thực hiện nhanh chóng, quy mô lớn các mô hình AI của Baseten

Generatived

9:00 19/9/25

Baseten (không rõ trụ sở chính) là nhà cung cấp cơ sở hạ tầng AI giúp các công ty khởi nghiệp chạy mô hình "nhanh" và "ở quy mô lớn". Công ty gần đây đã công bố những tiến bộ đáng kể trong việc cải thiện thông lượng và latency, hai lĩnh vực mà khách hàng coi trọng nhất.

Bằng cách tận dụng máy ảo Google Cloud A4 và Dynamic Workload Scheduler, cùng với sự hỗ trợ của NVIDIA Blackwell, công ty đã cải thiện đáng kể hiệu suất suy luận, đạt mức cải thiện 225% về hiệu suất chi phí cho suy luận tập trung vào thông lượng và cải thiện 25% về suy luận tập trung vào độ trễ.

Tiến bộ công nghệ này sẽ cho phép các công ty đưa các mô hình AI và suy luận mạnh mẽ vào sản xuất một cách tiết kiệm chi phí, cho phép AI giọng nói thời gian thực, AI tìm kiếm, quy trình làm việc của tác nhân, v.v. ở quy mô và chi phí chưa từng có.

Baseten, hợp tác với Google Cloud và NVIDIA, cung cấp một nền tảng suy luận tập trung vào hiệu suất và hiệu quả chi phí. Thành công của công ty nằm ở chiến lược tận dụng tối đa phần cứng tiên tiến và phối hợp chúng với một bộ phần mềm được tối ưu hóa cao. Chi tiết được cung cấp trong bài đăng trên blog của Baseten.

Chia sẻ bài viết này:

Tin tức mới nhất
NVIDIAがAI開発基盤を拡充

NVIDIAがAI開発基盤を拡充

14:00 29/7/26

NVIDIA(米国カリフォルニア州)は、半導体設計におけるRTL開発および検証処理を支援するAIモデル「Nemotron 3 Ultra」の成果を公開した模様である。

NVIDIAがモデル転送高速化技術を発表

NVIDIAがモデル転送高速化技術を発表

14:00 29/7/26

NVIDIA(米国カリフォルニア州)は、大規模AIモデルの重みデータをGPUへ高速転送する技術「ModelExpress」を発表した模様である。

NVIDIA、韓国のAIエコシステムとの協力を大幅拡��張

NVIDIA、韓国のAIエコシステムとの協力を大幅拡張

9:00 28/7/26

NVIDIA(カリフォルニア州サンタクララ)は、サンフランシスコで開催された「AI Summit」において、韓国の李在明大衆大統領をはじめとする同国の政財界リーダーらと会談し、国家規模のAIインフラおよびエコシステムの拡張に向けた大規模なパートナーシップを発表した。

NVIDIA AIがモデルカスタマイズを標準化

NVIDIA AIがモデルカスタマイズを標準化

9:00 28/7/26

NVIDIA(米国カリフォルニア州)は、大規模言語モデル「Nemotron 3」の追加学習とカスタマイズを容易にする環境を提供するため、外部プラットフォームとの連携を進めていると報じられている。

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
NVIDIAがAI開発基盤を拡充

NVIDIAがAI開発基盤を拡充

14:00 29/7/26

NVIDIA(米国カリフォルニア州)は、半導体設計におけるRTL開発および検証処理を支援するAIモデル「Nemotron 3 Ultra」の成果を公開した模様である。

NVIDIAがモデル転送高速化技術を発表

NVIDIAがモデル転送高速化技術を発表

14:00 29/7/26

NVIDIA(米国カリフォルニア州)は、大規模AIモデルの重みデータをGPUへ高速転送する技術「ModelExpress」を発表した模様である。

NVIDIA、韓国のAIエコシステムとの協力を大幅拡張

NVIDIA、韓国のAIエコシステムとの協力を大幅拡張

9:00 28/7/26

NVIDIA(カリフォルニア州サンタクララ)は、サンフランシスコで開催された「AI Summit」において、韓国の李在明大衆大統領をはじめとする同国の政財界リーダーらと会談し、国家規模のAIインフラおよびエコシステムの拡張に向けた大規模なパートナーシップを発表した。

NVIDIA AIがモデルカスタマイズを標準化

NVIDIA AIがモデルカスタマイズを標準化

9:00 28/7/26

NVIDIA(米国カリフォルニア州)は、大規模言語モデル「Nemotron 3」の追加学習とカスタマイズを容易にする環境を提供するため、外部プラットフォームとの連携を進めていると報じられている。

bottom of page